【摘 要】
:
图像超分辨率是一个经典的计算机视觉问题,它根据给定低分辨率图像恢复出一个高分辨率图像,在安防成像,医学图像,图像生成等领域有着广泛的应用。近年来,深度卷积神经网络在图像超分辨率问题上取得了显著的进展,研究人员提出了大量性能优异的深度模型。其中,多尺度残差网络(Multi-Scale Residual Network,MSRN)是一种具有代表性的图像超分辨率模型,它在图像超分辨率重建过程中提取和融合
论文部分内容阅读
图像超分辨率是一个经典的计算机视觉问题,它根据给定低分辨率图像恢复出一个高分辨率图像,在安防成像,医学图像,图像生成等领域有着广泛的应用。近年来,深度卷积神经网络在图像超分辨率问题上取得了显著的进展,研究人员提出了大量性能优异的深度模型。其中,多尺度残差网络(Multi-Scale Residual Network,MSRN)是一种具有代表性的图像超分辨率模型,它在图像超分辨率重建过程中提取和融合了图像中的多尺度特征和层级特征,获得了良好的超分辨率性能。然而,基于MSRN的超分辨率方法存在如下问题:(1)使用了大尺寸的卷积核,造成模型模型复杂度和计算量较大,(2)未能充分提取和利用图像中的多尺度信息,且在各通道上使用相同的方式对所有信息进一步提取,影响了网络的表达能力,(3)采用像素级L1损失作为损失函数,生成的超分辨率图像高频细节信息较少。本文从MSRN模型入手,针对以上问题进行了深入研究,提出了相应的模型进行改进,并在多个数据集上验证了模型的有效性。研究内容和创新点如下:(1)针对MSRN模型复杂度和计算量大,表达能力较低的问题,对MSRN进行改进,提出了多路径残差网络(Multi-Path Residual Network,MPRN)模型。该模型对卷积层输出特征在通道上进行切分形成多路特征,分别经过长度不同的路径来提取图像中的不同尺度特征,然后进行融合,提高了网络的表达能力,路径上的卷积层使用了较小的卷积核,相对于使用大卷积核,降低了复杂度和计算量。此外,受反馈机制启发,提出了基于反馈的特征融合,使用网络中的高层特征来细化低层特征,帮助低层特征提高表达能力,提高网络重建图像的质量。在5个常用的基准数据集以及遥感数据集上进行了实验,结果表明,相比MSRN,MPRN参数量更少,性能更好,具有更高的效率。(2)针对像素级损失作为损失函数时生成的超分辨率图像较为平滑、缺乏高频细节的问题,提出了新的梯度损失。该损失包含内容损失、结构损失和梯度对抗损失3个部分。内容损失使得生成图像与真实图像在像素值上尽可能的接近,提升生成图像的客观质量;结构损失使得生成图像和真实图像的梯度尽可能的相近,增强生成图像的边缘和纹理细节;梯度对抗损失通过对抗生成网络使生成图像获得更丰富的高频细节信息,提升图像的感知质量。在此基础上,结合前面提出的MPRN网络,提出了增强多路径残差网络(Enhanced Multi-Path Residual Network,EMPRN),并在在多个数据集上进行了实验,验证了EMPRN模型的有效性。
其他文献
随着医学图像采集设备的普及,例如X光、CT(Computed Tomography)和MRI(Magnetic Resonance Imaging),通信标准以及医学的数字成像技术被广泛应用于医疗图像处理系统和存储系统,医学图像成为了记载患者生理疾病信息的重要载体。随着医学图像数量的增加,医生的工作负担也随之加大,医生很难通过肉眼观察结构复杂的病变器官做出客观诊断;与此同时,机器学习方法和模式识别
随着集成电路技术的快速发展,对处理数据速度要求不断提高。FPGA以其高灵活性和丰富资源在很多领域有着广泛应用,配合DDR SDRAM作为外部存储器,具有传输速度快容量大的优点,在高速数据传输系统有着广泛的研究意义。FPGA具有功能全面和用户可配置的特点,由于芯片面积较大,时钟信号频率受限制,持续增大频率会导致芯片内部时钟相位相差较大,因此FPGA内部频率通常不超过200MHz。FPGA中I/O逻辑
[目的]研究蛋白激酶A(Protein kinase A,PKA)活化对体外血小板聚集功能的影响。[方法]收集健康成年人外周血获取洗涤血小板;采用PKA活化剂Forskolin体外处理洗涤血小板;利用血小板刺激剂U46619,胶原(Collagen),凝血酶(Thrombin),瑞斯托霉素(Ristocetin)和二磷酸腺苷(ADP)使得血小板发生聚集;利用聚集仪测得血小板聚集情况,利用Weste
近年来,随着移动互联网的发展,基于位置服务的需求日益增长。目前室内定位技术有待发展,其中基于Wi Fi的室内定位因为具有部署广泛的优势,得到了研究人员的广泛关注。目前研究人员可以使用商用网卡在Wi Fi信号中获取信道状态信息(channel state information,CSI)。CSI作为定位参考信息,具有定位精度优势。目前在使用CSI作为定位参考信息的室内定位中,存在人力成本高以及硬件成
目的:探讨苦味受体(bitter taste receptor)基因TAS2R38和TAS2R13多态性与中国苏皖地区汉族人群尘螨致敏的持续性变应性鼻炎(persistent allergic rhinitis,PER)的相关性。方
榛子是一种坚果,具有很高的营养价值,作为原材料广泛应用于各种食品中。本文以平欧杂种榛优良品种’辽榛3号’为试材,比较研究不同贮藏条件下平欧杂种榛坚果主要油脂品质的变
友爱是古希腊哲学中的一个重要问题,从古希腊开始就已作为一个困惑哲学家们的问题被提出和反思。西塞罗的友爱论深受古希腊思想文化的浸染,他的友爱论强调友爱与德性密不可分的关系。但是起初友爱与德性并没有任何联系,它们的结合是在古希腊哲学转向对人的关注,人的德性问题成为了哲学思想的聚焦点的时候才发生的。友爱与德性的关系在古希腊哲学思想和西塞罗的友爱论中有着不同的表述,柏拉图和亚里士多德都认为友爱是一种德性,
研究如何在商科类高职院校进行语文类课程思政教学改革,对学生有效地进行价值观和职业精神教育,具有相当重要的现实意义和应用价值。作为实施思政教育的主战场,大学语文应科
云南是旅游大省,城市客车是输送游客与乘客的主要交通工具之一;高原城市太阳辐射大,紫外线强,对车内环境影响大。车舱空气污染与热舒适关系到车内空气品质与驾乘人员身体健康,本文研究高原城市客车舱内的甲醛污染物及热舒适问题,具有非常重要的现实意义。依据我国车内空气污染检测标准,对夏季运营的35辆客车舱内空气环境进行了现场测量,测量参数包括:甲醛浓度、空气温度、相对湿度以及风量。按照我国、日本与韩国车内空气
氨是化工行业不可或缺的物质,即可以作为制冷剂,又在化肥、硝酸和炸药等制作过程中充当重要角色。一般以液氨形式存储,一旦存储容器失效,发生泄漏,将造成人员中毒与环境污染,若再引起火灾或爆炸事故,会造成更大危害。所以进行科学有效的液氨泄漏事故预防与救援处置相当重要。为了研究液氨储罐泄漏扩散规律及风险区域,以淮化液氨储罐作为研究对象,该研究内容为淮化氨罐区的日常安全管理防护提供了对策,并有利于风险评估与救