低照度场景下的图像增强与行人检测算法研究

来源 :上海海洋大学 | 被引量 : 1次 | 上传用户:long96169
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
大部分基于卷积神经网络的低照度图像增强方法需要相互配对的数据进行训练,在现实世界中获取大量同一场景下的低照度图像和正常光图像是非常耗时的。低照度场景下拍摄得到的图像存在着低对比度、颜色失真和大量噪声等问题,图像增强任务需要在保留图像细节的同时,进行正确的颜色恢复,提升图像视觉质量。图像增强算法可以为目标检测、目标跟踪、语义分割等计算机高级视觉任务提供更为有力的支持和帮助。行人检测在计算机视觉领域中是一个非常具有较高难度的研究方向,由于人体在时刻运动,因此会有各种姿态和形状,而且还非常大地受到行人外观穿着、人体姿态、监控视角等影响,另外还面临着光照、遮挡等因素的影响。尤其在低照度情况下,无论在室内还是户外,背景问题对行人检测算法来说都非常复杂,环境与人体更融为一体,肉眼难以辨别出背景还是行人,因此低照度下行人检测的难度显著增大,这对检测算法提出了更高的要求。低照度图像增强方法虽然通过提高低照度图像的对比度和亮度等,提升了人眼对低照度图像的感官感受,然而可能并无法对检测算法在低照度情况下的检测提供任何可靠性帮助,甚至可能减弱了图像中目标物体的特征,造成了检测算法的检测精度的降低。为了解决大部分基于CNN的低照度图像增强方法对配对数据的依赖,边缘模糊、噪声抑制不足等问题,本文使用生成对抗网络,整体模型由一个生成器,两个判别器(全局判别器和局部判别器)组成。在生成器上引入双分支结构,可在低照度图像和正常光图像无配对的情况下,进行端到端训练。第一个分支使用类U-Net网络的编码器-解码器体系结构的特征提取网络(Feature Extraction Network,FEN),该分支网络可以学习低照度图像到正常光图像的上下文特征映射,第二个分支网络为全分辨率的轻量级的细节保留网络(Detail Preservation Network,DPN),以低照度图像的全分辨率来保留原图的细节,加入空间注意力和通道注意力机制,由于光照受到物体反射、吸收等情况,物体表面的光照分布强度不同,该分支网络可以学习正常光图像的光照空间分布和通道之间关联。最后通过一个融合层融合两个分支的结果,获得最终增亮后的图像,同时加入了Total Variation Loss来抑制图像噪声。在七个公开数据集(MEF、LIME、NPE、VV、Ex Dark、LOL、LLVIP)上进行了定性比较和定量实验。相比于其他对比算法,本文方法在基于BRISQUE和NIQE两种基准测试的客观评价中,均取得了平均值第一名,平均值分别为18.98和3.71。实验结果表明本文方法减弱了图像噪声,增强后的图像边缘细节清晰,通过端到端的学习,无需人工提供先验信息,能够学习到正常光图像的光照分布,从非配对的低照度图像映射到正常光图像的分布,提高对比度和亮度,减少颜色失真、噪声等问题的影响,轻量化的结构设计避免模型过于庞大,减少模型过拟合问题,双分支结构有效提高了图像增强质量。本文将生成器作为增强网络,提出了融合高斯滤波的低照度下行人检测算法。通过在LLVIP行人检测公共数据集上使用YOLO检测算法的实验表明只使用本文的生成对抗网络低照度图像增强算法相比与原始低照度图像组行人检测在TP(True Positive)指标上没有太大变化,但是降低了FP(False Positive)值,从而使检测精度有略微提升,相比于原始低照度图像组行人检测精度AP值提高了0.03%。通过去噪(如BM3D去噪、高斯滤波)、提高对比度(Gamma校正)等传统图像增强方法与生成对抗网络融合的多组实验,实验结果表明通过生成器和高斯滤波的融合,极大降低了FP值,取得了对比实验中的最高精度,行人检测精度AP值达到了94.69%,相比于原始低照度图像组AP值提高了0.92%,相比于只使用生成对抗网络增强低照度图像AP值提高了0.89%。在无本文生成器增强情况下,只使用传统增强算法,行人检测精度AP值相比于原始低照度图像组都有所下降。对比实验证明了生成对抗网络技术与高斯滤波传统图像增强算法的有效融合,可以大大降低FP值。高斯滤波去噪比Gamma校正更能够减少噪声干扰,将行人与背景之间更加有效区分,从而对行人检测能够提供更加高效的检测特征,降低对背景物体错误识别成行人,减少误检率、漏检率。
其他文献
随着智慧海洋工程的推进和海洋信息化的发展,以及海洋时空数据采集和获取方式的多样化,我国在海洋各个领域获取了大量数据。海洋数据从属性、空间及时间语义完整地描述了海洋地理现象,呈现出多源、多维度等特征。但由于数据在获取、处理以及存储等过程中存在差异,以及海洋信息获取技术已经由二维延展到了三维一体化的空间范围,使得海洋科学数据成为了典型的多源异构的三维空间数据,存在兼容性差、利用率低等诸多问题,为数据的
学位
国民经济的快速发展为社会建设带来机遇的同时,也带来了诸多挑战,如可用土地资源数量逐渐减少,生态环境受到严重破坏。因此,应对土地规划及生态环境保护予以重视。空间规划有利于加快城乡建设、公共基础设施建设和环境保护。生态环境保护在经济发展中的地位逐渐提高,因此有必要采用科学方法对国土空间规划体系中生态环境保护问题进行解决,以便为今后土地空间规划生态系统的建设奠定基础。
期刊
本文就生态环境保护规划对国土空间规划体系构建的重要性进行分析,并对现阶段国土空间规划对生态环境保护的影响加以阐述,提出生态环境保护规划体系构建及管治内容明确、以促进国家高质量发展为导向加强生态环境保护及建立生态环境保护信息平台等对策,希望能为国土空间规划决策提供参考建议。
期刊
多动症以注意力不集中、多动、冲动为主要特征。多动症的治疗主要集中在药物治疗和心理行为干预。家庭在多动症儿童的治疗中作用重大。本文从五个方面阐述多动症儿童的家庭干预方法,促进多动症儿童早日治愈。
期刊
海水缺氧会导致多种海洋生物濒临灭绝,进而破坏海洋生态平衡、阻碍全球氮、磷循环、影响人类的生产生活。目前,全球范围内的缺氧海域数量仍在逐年增加。从整体来看,全球海洋海水溶解氧含量的下降速度可能已经超出了自然随机波动的水平。近几十年来,为了更高效全面的了解海水溶解氧现状并及时治理,学者对海水溶解氧的关注度逐渐提高。其中,海水溶解氧的评价和预测成为最近的研究热点,但研究人员获取到的海水溶解氧原始数据为时
学位
近年来,计算机视觉和数字影像分析技术迅猛发展,图像信息、多媒体信息以及其他的众多信息以一种新的信息呈现方式出现在我们的视野中,融合到我们的生活中,在工业、医学、遥感等诸多我们所熟知的领域,都可以看出数字影像技术和计算机视觉技术的广泛应用。因此,越来越多的人开始意识到数字图像处理技术的重要性,他们把图像作为获取信息的一种新的重要方式,并开始逐渐习惯从纷繁复杂的图像中提取我们所需要的信息。然而,获取高
学位
可持续发展理念下,实施节能降耗控制已经成为炼油化工企业绿色生产的内在要求。在阐释炼油企业节能降耗控制必要性的基础上,分析炼油企业节能降耗生产中的问题,并指出节能降耗技术在炼油化工企业生产中的应用要点。期望能进一步减少炼油企业生产中的能源消耗,提升企业生产效益,促进炼油化工企业的持续、稳定发展。
期刊
国土空间规划工作的开展需基于现有资源具体破坏情况开展管理工作。而随着经济社会建设步伐不断加快,对于我国土地空间规划的科学性与有效性提出更高要求。在分析国土空间规划与生态环境保护内涵、阐述生态环境与国土空间规划关联性基础上,围绕生态修复规划、生态红线协调性、生态环境用途管制、生态空间分类与分级、生态环境保护分层管制维度,提出国土空间规划下生态环境保护策略,从而有效提升我国国土空间规划对于生态环境保护
期刊
船舶自动识别系统(Automatic Identification System,AIS)每间隔几秒钟向卫星或陆基接收器传输船舶身份、位置、航速和航向等空间信息。渔船AIS轨迹信息蕴含着渔船自身特有的属性、状态和空间行为特征,在一定程度上反映渔船捕捞作业行为与所处环境中各种要素直接的交互关系。近年被国内外学者用于挖掘渔场时空高精度捕捞强度信息,了解渔场捕捞压力和渔船捕捞空间行为,为时空高精度渔业资
学位
<正>在学校老师和其他家长眼里,多动症儿童就像是班里的一把"达摩克利斯之剑",随时都可能会产生难以预料的后果。面对多动症儿童,家长不知道怎么教,老师管不了,特殊学校收不了,多动症儿童教育到底路在何方?专家称,多动症儿童的教育是一个复杂的问题,仅靠一方根本无法
期刊