基于超分辨率重建和聚焦区域检测的多聚焦图像融合

来源 :河北大学 | 被引量 : 0次 | 上传用户:tyftongyunfeng
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着科学技术的快速发展,图像成为人们获取信息的一种重要方式。在图像采集过程中会受到传感器设备的限制和外界因素(如光照强度、温度等)的干扰,致使获取的图像质量往往较差,同时单一的图像很难反映出场景内的全部信息。因此,通常采用图像融合算法来进行信息互补,融合后的图像广泛应用于国防军事、医疗诊断、安防监控等领域。作为融合领域的一个重要分支,多聚焦图像融合解决了光学器件景深有限的问题,可以将同一场景中不同景深范围内的聚焦图像合并生成一幅清晰图像。传统的融合算法大多通过设计不同的融合规则和聚焦检测方法在空域或变换域上直接对源图像进行处理。虽然这些算法可以实现图像融合,并在一定程度上解决了光学器件景深有限的问题,但由于融合时所使用的源图像本身质量可能较差,往往会导致融合算法不能很好的选择聚焦区域,进一步造成了融合图像中存在人造伪影或聚焦与非聚集区域边界模糊等问题。针对上述问题,本文从图像质量提升和聚焦区域检测方面进行深入研究,提出了两种基于超分辨率重建和聚焦区域检测的多聚焦图像融合算法,并将其应用到彩色多聚焦图像融合中。具体研究内容如下:(1)基于双通道卷积神经网络(Convolutional Neural Networks,CNN)重建和向导滤波的多聚焦图像融合为了提升融合图像的质量,改善融合效果,本文利用基于双通道卷积神经网络的超分辨率算法进行聚焦区域检测,并结合双边滤波和向导滤波提出了一种多聚焦图像融合算法。首先,将源图像输入到双通道卷积神经网络中,来恢复图像的细节和结构,从而提高图像的对比度。其次,通过双边滤波来降低噪声对融合图像的干扰,使用向导滤波对图像的聚焦区域进行检测并不断细化决策图。最后,依据决策图对源图像进行加权融合得到融合图像。实验结果表明,本文算法具有很强的鲁棒性,能够很好地保留图像信息,且能保持良好的空间一致性。(2)基于深层残差网络(Residual Network,ResNet)重建和结构梯度的多聚焦图像融合传统的多聚焦图像融合算法很难区分聚焦区域和散焦区域的边界,因此导致该部分在融合图像中边缘连续性较差。为了解决上述问题,本文结合结构梯度提出了一种基于深层ResNet重建的多聚焦图像融合算法。首先,该算法将源图像输入到深层ResNet中来进行低视觉图像重建,通过网络映射来恢复图像细节,并利用滚动向导滤波进行边缘保持。其次,结合结构梯度进行聚焦区域的特征检测,并以此生成图像融合决策图。最后,根据图像融合决策图对源图像进行加权融合得到最终的融合图像。实验结果表明,该算法对聚焦区域边缘的检测更加准确,决策图的聚焦散焦区域识别精度相比其他算法有了很大的提升,并且可以很好地保留源图像的细节纹理特征和边缘结构。
其他文献
随着我国近年来天然气工业的不断发展以及城镇居民生活水平的不断提高,天然气作为清洁能源,其已经成为城镇居民的重要生活能源。天然气门站作为天然气长输管线的终点站,同时也是城市的接收站,其肩负着对上游来气进行净化、计量、调压、加臭、输送的重要责任。本论文以河北衡水“大营2*75 MW级燃气热电联产项目天然气供气管道大营门站工程”项目为课题来源,设计开发了一套天然气门站监控管理系统,用以保证大营天然气门站
随着中国互联网事业的不断发展与进步,网络上产生的信息量呈指数式增长。在这样的背景下,推荐系统作为信息过滤的重要方法,越来越受到人们的关注。虽然推荐系统经过几十年的研究与发展,其性能已经得到了大大提升,但评分数据稀疏和冷启动等问题,仍制约着推荐系统的推荐性能。针对推荐中数据稀疏和冷启动的问题,本文在传统推荐算法的基础上引入了深度学习,提出了一种基于非负矩阵分解与深度学习的推荐算法。为提升推荐系统的推
当前的人脸识别技术已能准确识别出访问者是否存在于底库中,但仍很难分辨访问者的真实性,即是本人直接访问还是他人冒充该个体的信息进行访问。人脸活体检测技术对于保障识别系统的安全性起到了重要作用,尽管目前基于深度学习的方法能提取图像中的语义特征,并利用人脸深度信息和时序信息作为辅助监督,但仍存在四点不足:第一,仅采用均方误差损失来约束人脸深度预测网络的训练,预测结果仍待提高。第二,聚焦于深层的语义特征,
随着人们生活水平的提高,与肝脏器官病变相关的患者数量逐年攀升。肝癌给患者及其家属造成了无法估计的损失。电子计算机断层扫描(CT)技术具有无创、图像清晰和高密度分辨力的优点,是一种常见的检查手段。随着深度学习技术的发展,许多研究人员将深度学习技术应用到医学图像分割领域。在肝部CT图像中的肝脏和肝肿瘤分割任务中,肝脏和肝肿瘤具有位置多变、形态各异和边界重叠等特点,本文对经典U-Net模型进行改进,针对
“脑卒中”又称“中风”,是一种由大脑血管突然破裂或阻止血液流向大脑引起的脑血管疾病,最终会导致脑组织损伤,致残率和死亡率较高。MRI技术是一种无损成像,并且可获得较高分辨率的组织结构图像,对脑组织的精确分割是脑卒中诊断脑组织损伤程度的前提。MRI脑图像分割中常用的方法是核模糊熵聚类(KFEC)算法,虽然该算法通过优化隶属度值以及对输入数据进行高维映射,消除了MRI脑图像中的部分噪声,但仍存在三个主
近几年阿尔茨海默病(Alzheimer’s disease,AD)的患病人数不断上升,目前全世界约有5000万AD患者,我国约占其中的25%,AD患者临床表现为记忆障碍、失语、失认等,给患者家庭带来沉重的心理影响和经济负担。弥散张量成像(DTI)依据水分子的弥散程度制图,通过纤维束追踪可有效揭示AD患者大脑中脑白质的结构变化,对于AD患者的早期预防和诊断具有重要的研究价值。基于DTI图像的纤维束追
皮肤作为人体中唯一的体表器官,是抵御外界有害物质进入人体的第一道屏障,因此很容易受到各种伤害而产生病变。黑色素瘤作为皮肤病中危害最大的一种疾病,不仅转移速度快,而且病情发展迅速,死亡率在皮肤性疾病中高达75%,如果能在发病早期对黑色素瘤进行准确的识别,通过手术切除治疗,可以在5年内使患者的生存率达到97%以上。因此,对早期皮肤镜黑色素瘤图像进行准确的判断识别可以帮助成千上万的患者得到及时的救助,避
学位
近年来,随着地下空间开发加速与能源利用效率提升,地下综合能源监测系统具有越来越重要的意义,同时物联网发展迅速,能够满足更高效、便捷的监测需求。本论文对应用场景进行了需求分析,针对地下空间分布距离远、监测参数多、工作设备多、公网信号盲区的问题,设计了基于LoRa通信的地下综合能源监测系统。首先,设计了基于STM32的LoRa通信设备的硬件电路。采用STM32F103C8T6芯片作为主控模块,采用SX
随着网络用户的急剧增加,人们的生活方式、信息传播方式已经完全改变,人们面临信息过载问题,个性化推荐是解决该问题的有效方法之一。个性化推荐系统的核心是推荐算法,目前常用的协同过滤推荐算法虽然具有其的自身优势,但仍然存在着一些问题,如数据稀疏性问题和冷启动问题等,由此导致了推荐算法的性能、准确度等问题。因此,本文针对传统协同过滤推荐算法存在的问题从多个角度对算法进行改进,具体的改进方法归纳为以下几点: