基于分层特征融合网络的图像超分辨率重建

来源 :广东工业大学 | 被引量 : 0次 | 上传用户:plumblossommeihua
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
得益于深度学习和卷积神经网络的发展,近年来图像超分辨率重建算法发展迅速。相比较于传统插值法和重构法,深度学习能够更有效地学习低分辨率图像与高分辨率图像之间庞大而且复杂的映射关系。但现阶段基于卷积神经网络的图像超分辨率重建网络不仅模型复杂度高,图像特征利用率低,而且对于设备性能的要求也很高。尤其是应用在复杂拍摄环境中的图像超分辨率重建算法,由于拍摄环境和设备的限制,加之环境噪声复杂,算法能够提取到的有利特征较少,最终重建得到的图像质量也较差。针对以上问题,本文从现有网络模型结构入手,对应用在高空复杂环境下的图像超分辨率重建算法进行优化,以达到改善重建图像质量,降低模型参数量的目的。主要工作如下:(1)提出分层特征融合网络结构。首先引入对称的分层结构,以增强不同尺度下图像特征的融合;其次使用更为密集的残差连接结构,减少局部残差损失;最后在每个残差块中加入轻量级注意力机制,增强网络对图像高频信息的敏感度。(2)引入分级蒸馏残差结构对网络做进一步优化。分级蒸馏残差结构结合局部长路径和局部短路径残差信息,有效地降低了传统密集连接块的计算量,并提高了链式卷积特征提取的效率,增强网络的表征能力。此外,蒸馏残差策略也明显地提高了分层融合网络重建图像的速度。(3)在公开的航拍图像中选取具有代表性的航拍图像作为模型训练的数据集。针对不同的航拍环境,合理地选择对应的图像数据,切割之后使用双三次下采样处理得到图像对,并采用合适的数据增广手段对数据集进行扩充处理。为了验证算法的有效性,本文针对复杂的航拍环境对算法进行特定的训练和微调,以最大化网络的性能。最终实验结果表明,所提算法相比于EDSR等算法在14个不同航拍图像环境中,尤其是复杂场景下的重建,平均峰值信噪比(PSNR)和结构相似度(SSIM)都有不错的提升。同时算法模型的复杂度得到了一定的改善,提高了算法重建图像的速度,拓展了其在实际生产生活中的应用。
其他文献
在人类社会的发展过程中,距离测量一直都有着极其重要的作用,其测量的精度也成为当今航空航天技术、装备加工制造、精密测量等领域的重要指标。随着科学技术的发展以及科学研究的不断深入,人们也一直在追求更高的绝对测距精度。传统的激光测距已经难以满足当前工业场景中的大尺寸、高精度、实时性测量要求,飞秒激光频率梳的出现,为解决这一问题提供了技术方法。飞秒锁模激光器发射出超短脉冲信号的脉冲宽度在飞秒量级,具有较高
学位
推荐系统是用来解决信息过载的一项重要技术,然而,传统的推荐模型中存在数据稀疏性和冷启动的问题,从而导致推荐精度不高。研究表明,一般的解决方案是通过添加一些额外的语义信息来提高推荐的准确性。而知识图谱包含了大量的语义内容,可以作为推荐系统的辅助信息。图卷积神经网络可以很好的处理非欧几里得结构,即图结构数据。将知识图谱和图卷积神经网络结合,利用图卷积神经网络来挖掘出知识图谱中节点之间的特征。另外,用户
学位
借助热红外线对微弱热源的观测能力,开展大范围非接触式异常热源观测技术的研究对公共安全领域具有重要的意义。在热源观测领域中热红外图像是微弱异常热源的重要信息载体。受限于器件性能与复杂环境干扰,热红外图像存在分辨率低、对比度差、噪声干扰与纹理模糊等问题。相应的,热红外图像承载的微弱异常热源存在像素信息少、易被噪声干扰与纹理细节不足的问题。图像超分辨率算法通过构建低分辨率图像与高分辨率图像之间的空间映射
学位
复杂网络任意两点之间的最短路径计算方法不仅应用于信息通信、交通运输、灾害预警等众多实际应用场景,也是复杂网络特征量计算的依据。因此最短路径问题得到了众多领域学者的关注。随着大数据时代的来临,网络规模已远超出最短路径经典算法的适用范围,近似算法成为了可行的替代解决方案。然而现有的近似算法在效率上的提升都是以牺牲大量的预处理或搜索精度为代价的,无法同时满足大规模网络最短路径计算的高准确度和低延迟的需求
学位
近年来,学者们为突破冯·诺依曼计算系统的局限性和实现更强的计算系统,且在生物脑科学的启发和在硬件算力快速发展的背景下,提出了诸多关于类生物神经网络的计算技术,而在对生物神经网络的模拟中,脉冲神经网络(Spiking Neural Network,SNN)是目前较多学者研究的类脑计算技术。脉冲神经网络的神经元节点具备时间序列动力学特性,其突触结构通过稳态可塑性学习规则来达到平衡,并且能通过不同的拓扑
学位
信息抽取技术作为自然语言处理领域最重要的底层任务,旨在从非结构化的文本中抽取出高密度的知识元,其最重要的两个子任务是实体识别和关系抽取。知识图谱具有强大的语义推理能力,构建高质量的产业知识图谱能够推动行业信息化转型。然而,互联网上的非结构化数据通常蕴含着复杂的文本结构,传统的信息抽取算法无法应对这种复杂的语义信息。本文通过改进现有的算法,围绕如何有效处理重叠三元组这一问题展开研究,主要研究内容如下
学位
过去的几年里,随着图形图像处理设备性能的大幅提高,深度学习席卷了计算机视觉大部分领域。目前为止,SFM(Structure From Motion)是计算机视觉中少数还是由传统方法占据优势的领域之一。传统的SFM算法大多依赖于几何计算,首先通过特征匹配找到两帧之间的相匹配的特征点,再利用几何线索的显式推理来重建三维结构,从而得到深度信息。这些算法经过多年的研究和优化已经取得了优秀的成果,但是在环境
学位
透明物体作为日常生活中常见的物体,对其进行操作是机器人领域中具有挑战性且亟待解决的问题。其中,如何实现透明物体的6D位姿估计已成为一个关键技术难点。目前,主流的6D位姿估计方法主要面向于纹理丰富或不透明的物体。本文将以透明物体作为研究对象,结合透明的光学特殊性,开展了对透明物体基于RGB-D的6D位姿估计方法研究,提出了纹理与深度信息融合的透明物体6D位姿估计方法。本文的研究内容主要包括:(1)针
学位
在现实世界中,真实数据往往来自多个异构源或者通过几个不同的特征集来描述,这便是多视角数据。由于多视角数据往往可以更为准确地描述目标对象,多视角学习已成为机器学习领域的重要分支之一。与此同时,多视角数据往往会由于一些不可控因素丢失一部分样本,从而造成数据的不完整性。为了更好地处理这些不完整的多视角数据,不完全多视角聚类成为独立于完全多视角聚类的一大分支。挖掘(不)完全多视角数据潜在的一致性信息是提升
学位
在经济快速发展的过程中,近年来社会用电量高速增长,电网需求也随之增加。为满足基本生活需求,保证居民正常生活,现有的电网规模日益扩张,增设的输电线路导致其分布更加繁杂,给电网安全带来了巨大的挑战。我国土地辽阔,地理环境复杂,为实现用电全国覆盖,部分输电线路需经过地质条件复杂的区域,复杂的地质条件因其受自然环境影响可能发生不利变化或异常变化,输电线路长期暴露在自然环境中,因其所处地质环境复杂,极易遭受
学位