基于深度学习的图像超分辨率重建算法研究

来源 :南京信息工程大学 | 被引量 : 0次 | 上传用户:andalee
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像超分辨率重建能够提高图像的分辨率,恢复图像的高频信息。高分辨率图像拥有更多的信息量,对边缘细节信息描述的更具体。如今,随着计算机设备性能和人工智能技术的提高,把深度学习的卷积神经网络应用于超分辨率重建算法中成为研究热点。基于深度学习的超分辨率重建算法是通过软件的方式来改善图像的质量,具有成本低,灵活性强的特点。本文基于卷积神经网络的“深度”对超分辨率网络进行改进,主要体现在以下几个方面:(1)提出一种高效注意力超分辨率卷积神经网络(Efficient Attention Super-Resolution Convolutional Neural Network,EASRCNN),该网络是对浅层网络FSRCNN(Fast SuperResolution Convolutional Neural Networks)的改进。在EASRCNN网络中,首先引入通道注意力模块,使网络模型的关注点聚焦于“什么样的特征是有意义的”;接着引入空间注意力模块,使网络模型的注意力转移到“哪里的特征是有意义的”;然后利用残差跳跃连接结合前后网络的局部特征信息;最后利用反卷积重建图像。实验结果表明,EASRCNN与FSRCNN相比,重建超分辨率图像的评价指标PSNR(Peak Signal to Noise Ratio)最高增加0.37d B,SSIM(Structural Similarity)最高可达0.9709。(2)提出金字塔多尺度残差网络(Pyramid Multi-scale Residual Network,PMSRN),该网络是对极深网络MSRN(Multi-scale Residual Network)的改进。首先,用分层残差内连接Res2Net残差块和空洞卷积构成MSDRB(Multi-scale Dilation residual block),该模块可增强对上下文特征的检测能力;然后,通过特征融合结构HFFS(Hierarchical Feature Fusion Structure)对分层局部特征进行融合;最后,在重建结构中增加全局与局部特征的互补模块CB(Complementary Block),改善原始特征信息被忽略的问题。实验表明,PMSRN与MSRN相比,重建超分辨率图像的评价指标PSNR最高增加0.43d B,SSIM最高可达0.9776。
其他文献
行人重识别是计算机视觉中的一项重要任务,其目的是为了检索存在于图像或者视频中的特定行人。近年来,随着深度学习的发展,行人重识别研究也取得了许多突破,并且在安防和刑侦等多个领域取得了广泛的应用。目前,传统的行人重识别方法大多致力于提取丰富的图像特征。但是,当面对实际场景下常见的遮挡问题时,它们的识别精度都会出现大幅下降。根据遮挡情况的严重程度,本文将遮挡式行人重识别分为局部遮挡和部分遮挡两种。本文基
运动物体的目标检测和跟踪是当下计算机视觉领域中的重要研究课题之一,它在视频监控、自动驾驶、人机交互、防空预警等领域具有广泛的应用。目前,尽管目标跟踪已经取得了很多研究成果,但在一些复杂多变的场景中,由于目标受到部分遮挡、几何变形、快速运动、尺度变换等因素的影响,现有的算法跟踪目标的精度和鲁棒性不佳,因此,目标跟踪仍然是一个非常具有挑战性的任务。近年来,随着深度学习在计算机视觉的火热发展,深度学习在
当前的点云分割方法主要分为基于多视角的方法、基于体素的方法和基于点特征的方法,以Point Net为代表的基于点特征的点云分割方法准确度通常高于多视角和体素方法。因此,本文考虑点云的点特征信息,为点云结构建模。现有的基于点特征的方法大多是通过多个多层感知机将点云映射为高维特征,并使用池化操作捕获特征,其捕获的点云特征学习过程是孤立的,通常未考虑点云间的邻域关系,损失大量的空间几何信息。不仅如此,由
降水现象观测是气象观测的重要内容之一,实现降水的自动观测,可以提供更好的气象服务,而提高降水自动观测的准确性,是其研究的重要内容之一。本研究基于航天科工23所航天新气象科技有限公司的农业气象自动化观测站项目,利用贵州省近百个台站在2017年至2018年的降水数据进行分析,发现目前的降水现象仪还存在某些方面的误差,主要体现在:出现雨夹雪时容易误报为雨和雪,对毛毛雨和冰雹的识别准确率较低,以及面对某些
行人检测与跟踪是计算机视觉研究的重要领域之一,通过对行人进行定位获取其运动轨迹,实现对行人目标持续跟踪。随着深度学习与人工智能的发展,行人检测与跟踪技术广泛地应用于自动驾驶、无人机、智能监控等领域。近些年我国服务机器人行业发展迅速,智能公共服务机器人愈发普及,对于服务机器人智能感知技术也提出了更高要求。本文以行人检测与跟踪为研究对象,研究行人检测、跟踪等感知算法,并将算法移植至服务机器人上,为服务
光纤传感器具有传统传感器所不具有的优势,现已成为传感学界的研究热点。光纤折射率传感器发展到现在主要有光纤等离子体共振型、光强调制型和干涉型。光纤马赫-曾德尔折射率传感器到目前为止主要有四种不同的结构类型,分别是错位熔接型、熔融拉锥型、光纤气泡型和纤芯失配型。通过制作锥型光纤的方法可以提高传感器的灵敏度,常见的制备方法有化学研磨法、研磨法和熔融拉锥法。本文设计了一种基于纺锤型空气腔的光纤马赫-曾德尔
在过去的几十年里,生物传感器因其广泛的工业和科学应用而引起了人们的密切关注。光学传感器是一种通过研究结构的光学特性来解决这些应用的有效分析工具。随着技术的进步以及资源需求的增多,高科技设备逐渐趋于小型化发展。光与金属纳米结构的相互作用显示出独特的性质,产生了一个称为表面等离激元的新兴领域。将金属纳米结构与光纤进行融合,可形成一种具有高灵敏度、抗电磁干扰等优点的光纤生物传感器。这类光纤传感器可通过监
随着人们对气候不断变化的重视,大气环境探测对传感器设备的观测精度要求也越来越高。地表气温上升的速度约为0.1°C/10年,然而由于太阳辐射的影响,地表气象站观测到的气温会高于真实大气温度,导致存在1°C量级的辐射误差。因此,为降低大气环境探测的辐射误差,有必要设计一种低辐射误差的温度传感器来提高测量精度。针对上述辐射误差问题,本文提出一种旋转式强制通风温度传感器结构。利用计算流体动力学(Compu
“边缘人工智能”(edged artificial intelligence,edged AI)将机器学习带到了移动端,为大数据的研究有效地降低了时间成本、经济成本、能源消耗,在人们的视线中逐渐明朗,众多行业中对边缘AI的技术研究也伴随着人工智能的发展与成熟逐渐崭露头角。随着气象现代化建设的进程,很多地方都建成了自动雪深探测仪,绝大多数地区都采用江苏省航天新气象科技有限公司自主研发生产的地面降水降
光纤传感技术作为信息化社会的一大热点,由此产生的光纤表面等离子共振(Surface Plasmon Resonance,SPR)传感器因其质量轻、抗干扰能力强、成本低、灵敏度高等特点逐渐在各个领域被广泛利用。本文设计了两种基于复合膜的双通道光纤SPR折射率传感器结构并能最终实现双通道测量。论文主要工作如下:1.利用光纤表面等离子共振理论,分别设计了侧边抛磨、级联式多模-单模-多模(MSM)两种双通