基于深度学习的图像超分辨率技术研究与实现

来源 :中国科学院大学(中国科学院大学人工智能学院) | 被引量 : 1次 | 上传用户:Calvin521
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
目前图像和视频已经成为信息存储和交流的重要手段,用户原创内容中图像质量不可控与人们对于高清画质的追求成为一项矛盾,图像超分辨率重建任务旨在将成像效果较差的低分辨率图像重建为视觉效果更好的高分辨率图像,具有研究与实用价值。在国内外的研究中,基于深度学习的图像超分辨率重建技术已经被证实了其相对于传统插值算法的优越性,但在近年来的研究中,为追求网络性能的提升,网络深度急速增长,超深网络过高的参数量和计算量使其依赖于高性能计算设备,难以投入实际使用,尤其难以在移动端设备应用。针对这一现状,本文对基于深度学习的图像超分辨率重建算法进行研究,构建轻量级图像超分辨率网络,在移动端离线进行图像超分辨率处理。论文完成的主要工作如下:(1)针对目前图像超分辨率网络参数量与计算量过高的问题,本文根据实际应用需求,设计了一种轻量级的图像超分辨率网络结构,网络的基本组成构件除常规卷积层外,还有针对图像超分辨率重建任务设计的梭形残差构件,为追求性能与效率的平衡,论文用深度可分离卷积替换梭形残差构件中的中间层常规卷积,应用PRe LU函数作为网络中的非线性激活函数,亚像素卷积层作为网络中的上采样器,并且向网络中引入多步长支路,逐步进行上采样。论文采用主流性能评价方法对网络性能进行实验与评价,证明了算法的有效性。(2)本文将轻量级图像超分辨率模型向真实场景优化,并开发SDK jar包,将轻量级图像超分辨率模型的推断过程迁移至移动端本地进行,在具体的移动端设备上进行了移动端图像超分辨率的实施与验证,在智能手机上完成低分辨率图像的读取、超分辨率图像的重建与渲染。实际测试结果证明,论文提出的轻量级图像超分辨率模型能够部署在移动端离线完成图像超分辨率重建任务,在计算资源和内存资源有限的情况下仍能取得较好的效果。论文根据实际应用需求构建轻量级图像超分辨率卷积神经网络,精简网络的参数量与计算量,在性能和效率之间实现平衡,并将图像超分辨率模型部署于移动端设备,利用智能手机的计算资源进行推断,离线实现图像超分辨率处理。
其他文献
执行力,顾名思义,检验的正是政府部门行政效率的高低与行政能力的强弱。在现代社会中,对于一定的组织与单位而言,组织内部成员必须具有坚定的执行意识与理念,为完成组织内部的经营发展目标奠定基础。国土部门在土地资源管理、规划、监管等方面发挥着重要的作用,是土地行政执法监察的主体。国土部门及其下属部门执行力的强弱,直接关乎区域内土地资源优化配置的效率,是影响区域内土地资源利用率的关键要素。国土部门必须严格按
西安明城区作为古都西安城市发展和历史文化的核心空间载体,蕴含着丰富的人居智慧,但在以往更新发展过程中由于认识和实践的不足,造成了目前“有墙无城,有墙无市”的尴尬局面
沙尘气溶胶作为大气中最重要的气溶胶组分之一,通过影响辐射而在地气系统的能量平衡中起着重要的作用。但目前在确定沙尘气溶胶的光学性质以量化其辐射效应的过程中还存在很
催化裂化(FCC)油浆具有短侧链芳烃含量高、适量的脂肪族烷烃,少量沥青质、低灰分等特点,经预处理后是生产针状焦的优质原料。焦炭各向异性结构与炭化条件、原料化学组成及固
目的:探索2型糖尿病(T2DM)患者碘营养状态与甲状腺疾病、血糖、血脂代谢的相关性。方法:本研究共调查2018年11月至2019年11月入住大连医科大学附属第二医院内分泌病房行尿碘浓
进入到新世纪之后,我国加大了对农村基础设施投资的支持力度,但是受各种因素的影响导致农村公路建设出现了不少的问题,比如施工人员管理水平比较低、技术力量薄弱以及资金紧张等问题。为了改善农村公路建设过程中出现的各种问题,提高农村公路建设管理水平,控制好农村公路造价,有必要针对目前公路建设模式和造价控制过程中存在的问题进行深入研究,调查存在的问题,分析问题产生的原因,并提出相应的政策建议,推动农村公路建设
本文使用区域气候模式Reg CM4,先利用不同分辨率大气再分析资料(2.5°×2.5°、1.5°×1.5°、0.75°×0.75°)以及单向嵌套试验(粗分辨率模拟场离线驱动甚高分辨率试验)的方
白夹竹(Phyllostachys nidularia Munro f.nidularia)因其成材早、生长更新速度快、产量及竹笋营养价值高、附加值多等特点成为木材的重要替代品。梁平区现有竹林资源35.87万亩,其中白夹竹13万亩,而白夹竹低效林达10万余亩(占整个重庆白夹竹低效林的66.7%),无法满足当地产业化发展的需要,因此进行白夹竹低效林改造可有效缓解竹资源的供需矛盾。本文以重庆市梁平区竹
含油污泥是在石油开采、炼制、存储、使用等过程中被石油类物质粘附、渗透而形成的一种固体废弃物。热解是处理含油污泥比较常见的有效的方法。热解具有处理量大,处理彻底,减
近年来,水环境富营养化程度越来越高,已经发展成世界范围内关键的环境污染问题之一,导致藻类生物过量滋生,继而发生水华。水库型自来水厂经常遭受水华问题的困扰,当水源水中含有的藻类浓度过高时,会影响水池中混凝沉淀的效率,并导致过滤器阻塞、过滤周期大大缩减、增加出厂水中藻类毒素和藻类消毒副产物比例等问题。二氧化氯(ClO_2)能够控制藻类的主要原因是它对苯环具有一定的结合能力,可以使苯环发生变化而不产生气