基于深度学习的多聚焦图像融合

来源 :武汉大学 | 被引量 : 0次 | 上传用户:ANDY_YANG2005
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着成像技术的发展进步和各种成像设备的普及,人们能轻易地获取大量类型不同、内容丰富的图像。对于很多计算机视觉和图像分析任务来说,场景中所有物体都清晰的图像可以提供更多有用的信息。然而,在实际的拍摄条件下,几乎不可能只在一次拍摄中获得满足应用需求的全场景清晰图像。其原因主要有两个方面:一是成像设备中的光学镜头有景深范围的限制,只有处于距离光学镜头特定距离范围内的物体才能得到清晰的成像,范围之外的物体会有离焦模糊;二是在实际的拍摄场景中,往往有很多处在不同深度的感兴趣物体。多聚焦图像融合技术就是通过图像处理的方式,将在同一场景中拍摄的多张聚焦在不同深度处的图像进行融合,得到一张场景中所有物体都清晰的图像。本文在上述研究背景下,针对基于深度学习技术的多聚焦图像融合开展了深入的研究,旨在提高多聚焦图像融合的质量。本文的主要研究工作如下:1.分析研究了目前主流的多聚焦图像融合算法,将它归纳为基于变换域的融合算法、基于空间域的融合算法和基于深度学习的融合算法三大类。列举了这三类方法的处理步骤,分析总结了它们的优缺点。2.针对基于深度学习的融合算法需要大量带有标签的多聚焦图像作为训练数据,本文使用合成的方式,在带有物体分割标注的VOC 2012自然图像数据集的基础上,通过点扩散函数模拟离焦模糊,合成足够数量的多聚焦图像对作为训练数据集。3.针对传统的基于变换域和基于空间域的融合算法需要人工精心设计聚焦水平测量以及融合规则的问题,本文引入了深度学习技术,将聚焦检测转化为二分类的问题,通过卷积神经网络建立源图像与聚焦决策图的映射关系,并直接根据网络生成的聚焦决策图来指导多聚焦图像的融合过程。同时,针对目前的几种多聚焦图像融合算法无法对图像中的同质区域进行完整的聚焦检测,并且在聚焦与离焦区域分界处检测不够精确的难点,提出了一种新颖的U型卷积神经网络结构,并设计了一种混合损失函数来提升网络性能。实验结果表明,所提网络结构和损失函数有效解决上述难点。本文在公开的多聚焦图像测试数据集上与现有算法做了对比实验。为了对不同算法的融合结果做全面、多维度的定量评价,本文采用了基于信息论、基于图像特征、基于结构信息、基于人类感知的四类图像质量评价指标,对融合图像进行定量分析比较。本文还采用视觉主观感知评价的方式进行定性比较。定量和定性的实验结果一致表明本文算法可以精确检测出源图像的聚焦区域,得到高质量的全场景清晰图像。
其他文献
油茶皂素是从油茶籽粕中分离出来的一种五环三萜类皂苷,由有机酸、糖基、茶皂苷元配基三部分组成,具有抗菌、消炎、抗氧化、抗肿瘤等多种生物活性。然而由于茶皂素分子量大、
目的:1、观察分化型甲状腺癌手术中的中央区淋巴结染色情况及术后病理结果,探讨纳米碳示踪技术在分化型甲状腺癌中央区淋巴结清扫中的应用;2、探讨碳纳米示踪技术在分化型甲状腺癌手术中是否能减少喉返神经和甲状旁腺的损伤,加快术后康复;3、对纳米碳技术在临床中的实际应用价值进行总结归纳。方法:采用回顾性分析,选取我院于2017年9月-2019年9月在普通外科甲状腺专科行甲状腺癌手术的65名患者。术后通过病理
触弓线是接触网的重要组成部分,当触弓线发生故障时,会影响接触网的正常运作,甚至会中断高速列车的运行。因此,触弓线的检测识别对高速铁路安全系统具有重要的意义。论文首先
打击空中小型飞行器的要害部位是对其反制的重要手段,侦查气球作为空中飞行器中的一种,是被广泛使用的高空侦察辅助设备,侦查设备一般悬挂在气球尾部。侦查气球的非法使用和滥用,会对公民隐私甚至国家安全带来严重威胁,因此需要对其反制。侦查气球要害点检测的准确性与实时性的兼顾,是现有图像目标检测及跟踪方法难以解决的问题。针对以上问题,本文提出了一种在极坐标系统下的基于曲率特征的气球要害点检测算法。为了能够保存
本文针对常用的钙钛矿光伏材料CH3NH3PbI3(MAPbI3)存在的毒性较大、稳定性较差、不能有效利用太阳光中800nm以上红外光等问题,采用过渡金属中低毒性、小半径且成本相对较低的Zn2+代替部分Pb2+,利用Lewis酸碱理论协同一步旋涂法制备出新型钙钛矿光伏材料MAPb1-xZnxI3,并将这种改性材料应用到基于碳对电极且无空穴传输层的介观钙钛矿太阳能电池中,研究不同含量的Zn2+掺杂对光
本文基于对我国政府信息公开和个人信息保护立法现状的梳理,重点研究依申请公开政府信息中涉及的第三人利益的保护。通过对近年政府信息公开案件的实证分析,本文总结了实践中
随着海量、异构的物联网设备接入了网络空间,物联网设备安全防护措施缺失问题日益严重,导致设备安全问题频繁发生,造成了巨大的经济损失,甚至威胁国家基础设施安全。物联网设备的安全问题主要包括两个方面:首先,设备自身在安全问题上没有进行严格的检测和监管;其次,设备一旦部署到实地环境中,就很少进行升级、替换和暂停检测维修。围绕上述的问题,论文提出了基于关联关系图的物联网设备安全信息检测关键技术,包括三个细粒
有关果蝇幼虫的神经元和神经环路的研究基本上都是在固定或解剖的幼虫中进行,但是行为过程中的活体幼虫中的神经元发放到底是什么样子的呢,要想知道幼虫行为过程中的神经元发
川滇地区活动断裂众多,是中国强震发生最为频繁的区域,且震级大,震源深度浅,易造成严重地震灾害,导致巨大的经济财产损失和人员伤亡情况。本研究基于川滇地区历史地震数据,进
基于1960-2017年的753站逐日平均温度资料、NOAA重建的逐月海温资料、NCEP/NCAR的再分析大气环流资料以及大气环流模式试验,分析了我国冬季天气尺度气温变率的时空特征及其与