自适应的图像超分辨率算法研究

来源 :中国科学技术大学 | 被引量 : 0次 | 上传用户:stormcn
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像是数字信息化时代重要的信息传递的载体。然而,受限于图像采集设备的成本、成像模态本身的技术瓶颈以及信息传输条件,人们在现实生活中所采集的图像通常分辨率较低且模糊不清,较差的成像质量制约了后续的信息提取,也无法满足人们的视觉感官需求。图像超分辨率(Image Super-Resolution,ISR)重建技术旨在从一幅或多幅低分辨率(Low-Resolution,LR)图像中重建出成像设备无法直接获取的高分辨率(High-Resolution,HR)图像。图像超分辨率重建技术无需更新成像设备的硬件就可以提高图像的清晰度,因而其有着广泛的应用场景,如视频监控、卫星图像处理以及医学成像等。虽然近些年基于深度学习的图像超分辨率算法研究取得了不错的进展,但是这些算法在应用于真实应用场景时仍然存在很多挑战性的问题,诸如任意缩放因子的图像超分辨率问题、缺乏能自适应处理多种退化因子的高效图像超分辨率算法以及图像超分辨率算法性能与效率的平衡性问题。本文面向图像超分辨率在真实应用场景中的挑战性问题进行了深入分析,利用元学习、动态卷积和多分辨率融合等方法,提出了一系列针对性的自适应图像超分辨率算法。本文的研究内容和主要贡献可以概括如下:1)提出了面向任意缩放因子的图像超分辨率元学习算法。现有的图像超分辨率算法只能进行个别整数倍数的放大,而在实际应用场景中,人们迫切需要的是能缩放很多个不同倍数的图像超分辨率算法。针对这一问题,本文首次提出了基于元学习的面向任意缩放因子的超分辨率网络Meta-SR。该方法提出了位置投影映射算法来解决非整数倍数的LR-HR图像对之间的空间映射问题,从而基于卷积实现了非整数缩放因子的图像超分辨率任务;然后基于元学习设计了一个权重预测子网络来自适应地为每个缩放因子预测一组对应的放大滤波器参数。Meta-SR仅需要训练一个模型就能同时高效地解决很多个缩放因子的图像超分辨率问题。实验结果表明,该方法取得的性能远高于基于插值的任意缩放因子的图像超分辨率算法。2)提出了面向多种退化因子的图像超分辨率元学习算法。当前的图像超分辨率模型都是基于单一的、固定的退化假设所训练得到的,因此需要设计一个统一的图像超分辨率框架来应对真实应用场景中可能存在的多种多样退化情况。本文提出了一个基于元学习的元复原模块,该模块为不同组合的退化因子(模糊核和噪声参数)自适应地预测一组对应滤波器的权重。同时元复原模块被放置于网络的末端,首次尝试了后置输入退化信息,这种后置的复原模块能够更加高效地应对基于迭代估计退化因子的图像超分辨率问题。除此之外,本文还分析了该算法对不准确模糊核估计的鲁棒性。大量定性和定量的实验结果表明了所提出方法的优越性。3)提出了基于动态卷积和多分辨率融合的轻量级图像超分辨率算法。目前的轻量级图像超分辨率模型感受野普遍较小,导致模型捕捉上下文信息的能力有限。同时严格控制计算量的轻量级模型一般参数量也偏小,限制了模型的学习能力和表达能力。本文针对轻量级图像超分辨率模型的上述问题,提出了基于动态卷积和多分辨率融合的轻量级图像超分辨率重建方法。该方法中的多分辨率融合网络通过使用下采样操作来增大了网络的感受野,并学习到了涵盖空间信息和上下文语义信息的层次化特征;同时下采样操作降低了特征分辨率,从而在小分辨率特征上可以使用更多的参数进行学习;最后,提出了一个基于动态卷积的基础模块,能够在几乎不增加模型计算量的同时增加网络参数量,从而进一步提升了模型的表达能力。所提出的方法在多个数据库以及不同设定下均取得最佳的性能,实验结果表明该方法大大缩小了与大型复杂模型之间的性能差距。
其他文献
木材干燥是木制品生产过程中耗能最大的环节,而木材干燥室壳体热损失高达干燥总能耗的20%-30%,为解决木材干燥室壳体热损失,提高热能的利用率。本研究提出了一种通过利用复合
企业的发展战略决定着企业的生存和发展方向。新时代下包括供给侧结构性改革、乡村振兴战略、新旧动能转换等战略主题的提出及深入实施使得农业的发展尤其是高效生态农业的发展成为各方面关注的焦点,更为其提供了难得的发展机遇。同时,在此背景下现代农业企业的竞争环境也越来越激烈,山东博华高效生态农业科技有限公司(以下简称“山东博华公司”)作为一家综合性农业公司面临的经营环境也越来越复杂。因此必须要对公司的发展现状
培养思维能力需要顺应新时期时代发展潮流,迎合我国社会主义建设大方向与文化强国目标,一致于基础教育改革要求。本研究对高中英语阅读教学中思维能力培养引导下的教学设问方式展开研究,首先运用文献法搜集查阅该领域的相关研究成果,将交互补偿式阅读教学、布鲁姆认知领域教学目标作为本次研究的理论基础。主要运用课堂观察法筛选了某市某些高中英语阅读教学的180个教师提问,转写相应语料重点,探索怎样基于思维能力培养引导
随着我国重载铁路的高速发展,重载铁路系统的性能也不断完善。制动系统作为列车的核心部件,其运行状态关系着列车的运行安全。现有的制动系统故障诊断多是基于实测压力等数据的在线诊断方法,尚缺少制动摩擦副故障在线诊断的相关研究。本文以重载列车车轮为研究对象,以长大下坡道、采用周期制动方式下不同制动摩擦副故障的车轮温度场为研究基础,结合现场情况和现有标准建立了基于温度的重载列车制动系统摩擦副故障在线预警、诊断
干部选拔任用“一报告两评议”是中组部全方位、全过程监督各级地方、单位党委(党组)在干部选拔任用过程中执行干部选拔任用政策、程序、标准是否严格规范的一项重要职能工作,是评价干部选拔任用工作质量,解决干部选拔任用过程中薄弱环节、突出问题的重要手段,对确保选准人民好干部,服务社会发展中心大局具有重大的理论与实践意义。为科学、规范、高质量贯彻落实好中组部“一报告两评议”工作部署,各级地方、单位党委(党组)
间氨基苯磺酸是一种重要的化工中间体,主要应用于染料、医药、农药和光学材料等方面。传统的制备方法是采用铁粉还原间硝基苯磺酸钠并酸化得到,但该方法生产的产品质量差、污
蚕丝是一类重要的天然蛋白质纤维,应用于纺织领域已有数千年的历史。丝素蛋白(SF)作为蚕丝的主体成分,以其良好的生物相容性、可控的生物可降解性以及优异的力学性能,在生物医用材料、柔性电子器件以及能源装置等领域得到了广泛的应用。有别于传统无机、有机聚合物气凝胶,由SF制备的气凝胶材料在传统气凝胶特性的基础上,还具有生物相容、化学可修饰和结构可调控特征,在热量管理、医用植入材料以及智能可穿戴等领域展现出
配电网是整个电力环节必不可少的重要组成部分,其规划设计更是保障配电环节良好运行,衔接发电、输电及送电环节良好运行,乃至整个电力系统完整、稳定运行的基础。因此,如何对
一2016年清明前夕,春光明媚,云淡风轻。一辆越野车从合肥高架桥上飞速驶过,林立的高楼瞬间被甩在身后。车过梁园,经八斗,穿界牌集,一路向东,直奔此行目的地——新四军藕塘抗
随着改革开放的深入发展,我国经济、科技日益现代化,人民生活水平不断提高,尤其是随着大众传媒的异军突起,各种全新价值观念以及新锐生活方式的流行,使得人们的文化生活日益丰富多彩,伴随而来的多元文化并存也已经成为一种不可阻挡的趋势,将高校大学生裹挟在其中,各种偶像的流行,使得偶像崇拜现象越来越成为一种不容忽视的文化现象,影响着年轻的一代,尤其是大学生群体。高校思想政治教育作为高校学生思想教育的主阵地、主
学位