基于多尺度模型的单幅图像去雨算法研究

来源 :北京交通大学 | 被引量 : 1次 | 上传用户:uniw0909
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着时代的发展,作为第四次科技革命核心地位的人工智能关键技术领域之一,计算机视觉引起了广泛的关注。如今,各类计算机视觉算法取得了成功的应用,例如物体识别和检测、语义分割、目标运动跟踪、视觉问答等。这些算法被广泛地应用在军事、交通等领域。然而,作为常见的恶劣天气之一,下雨天采集的户外照片或视频质量常常因雨的遮挡而损质,从而造成后续以视频或图像作为输入的计算机视觉算法处理性能的下降。作为预处理过程之一,去雨是个具有挑战性的问题,且在实际生活中有着极为广泛的应用。根据输入对象的不同,去雨问题分为视频去雨和单幅图像去雨,本文针对后者进行研究。传统的单幅图像去雨算法主要基于图像分解模型,这一类算法忽略了图像的低频分量,在字典训练之后难以将有雨原子和无雨原子区分开,导致重建的去雨结果或者含有许多残留雨线或者过于模糊。随着深度学习的发展,神经网络在图像处理各个应用领域里表现出优异的性能,基于深度学习神经网络的方法在去雨效果上有所改善。但由于图像中的雨线通常具有不同的大小、方向,并且常常会重叠在一起,组成相对复杂,造成所训练的模型往往不能区分图像中的大雨和小雨,且容易忽略和恢复图像中的纹理细节,从而进一步导致过度去雨、去雨不足、和背景信息丢失等问题。不同于现有的直接在输入原始分辨率图像上进行去雨,本文提出了一种基于残差多尺度模型的单幅图像去雨算法。首先,将输入的带雨图像进行降采样到不同分辨率,这一操作将使得原始分辩率中的大雨在低分辨率图像中自动变小,小雨自动去除。其次,从最低分辨率带雨图像开始进行逐级去雨。然后,将此低分辨率的去雨结果进行上采样,与下一较高分辨率的带雨图像计算残差图,并将此残差图与下一较高分辨率带雨图像共同输入下一阶段进行去雨。最后,依据降采样次数重复此过程,直到输出最终原始分辨率的去雨图像。在此方法的研究基础上,为了减少模型参数并提高训练效率,本文进一步设计了多尺度感受野选择网络,提出了基于多尺度感受野选择网络的图像去雨算法。通过引入多尺度自适应感受野,不仅使得模型更加轻量化,还进一步提高了去雨算法的性能。本文将提出的单幅图像去雨算法在人工合成数据集Rain12000[17]、Rain14000[10]、Rain H[11]、Rain L[11]、Rain800[22]和自然数据集上进行了大量实验。在人工合成数据集上,实验结果表明本文方法提高了现有单幅图像去雨算法的性能。在自然数据集上,本文提出的方法生成的去雨图像在纹理和去雨上都有着更好的视觉效果。
其他文献
目的:非小细胞肺癌(non-small cell lung cancer,NSCLC)的诊断技术和多学科相结合的治疗方式不断改进,生存率的提高仍不令人满意,所以人们越来越关注影响非小细胞肺癌的预后
南北地震带位于青藏块体、鄂尔多斯块体、华南块体、滇缅块体的交汇区,分隔中国大陆的东部与西部,区域内部发育多条大型断裂,强震频发。本文研究区域为南北地震带北段(海原断
在寒冷地区,由于气候原因,项目建成后混凝土常期处于冻融环境中,使得混凝土的寿命以及安全性大大降低。近年来,在混凝土中加入相变材料,增强混凝土的抗冻性能,得到了广泛的关注。本论文利用微胶囊相变材料(Microencapsulated phase change materials,m PCMs)等质量代替砂,制备m PCMs掺量分别为0%、5%、7.5%、10%、15%、17.5%、20%的m PCM
背景:脑卒中后常发生上肢运动功能障碍,严重影响患者生存质量。间歇性theta节律刺激(intermittent theta burst stimulation,i TBS)是重复性经颅磁刺激的一种特殊范式,能以较短的干预时间和较低的刺激强度明显提高皮质兴奋性,促进患者上肢运动功能恢复。电针(Electroacupuncture,EA)因其标准化的可重复性和可行性,被广泛用于临床和科研中。曲池、合谷
合成孔径雷达干涉测量(Interferometric Synthetic Aperture Radar,In SAR)作为一种新型大地测量技术近年来发展迅速。由于其精度高、范围广、全天候监测等优势被广泛应用于
明晰结构–性能之间的关系是晶体、超分子等材料的设计与开发的关键。对于分子晶体来说,不仅需对分子间相互作用有透彻的理解,而且还需在此基础上创造出具有特定性能的组装结
东濮凹陷的油气勘探和开发工作业已进入中后期,其勘探难度日趋增大。多年的勘探开发研究业已展示其地质构造较为复杂,断层数量众多且交错分布,储层砂体非均质性强,造成各层段
在复杂煤层赋存条件下,采煤机螺旋滚筒在工作时容易发生磨损失效,尤其是截齿和螺旋叶片。为了研究其磨损问题,基于螺旋滚筒的截割机理和磨损理论,利用Pro/E与ANSYS Workbench软件建立了螺旋滚筒截割含夹矸煤岩的三维实体模型,在ANSYS/LS-DYNA软件中设置不同运动学参数模拟采煤机螺旋滚筒在截割煤岩时的动态过程,分析不同时刻煤岩体破碎带的变化过程;在ANSYS/LS-DYNA的后处理软
随着全球人口增长速度放缓,我国人口老龄化也日益严重,这将给我国社会经济发展带来严峻挑战。为了应对人口老龄化,国家先后出台了多项政策,大力倡导社区居家养老模式。在此前提背景下,社区居家养老服务中基层政府如何厘清和界定其职能范围与边界成为必须面对的命题。我国社区居家养老服务中采取的是政府主导的模式,但这并不意味着,政府在社区居家养老服务中承担所有的责任,政府的角色是管理者、规划者、推动者和监督者,而不
第一部分中国人群肺癌危险因素的Meta分析目的:探讨近10年中国人群肺癌的危险因素,综合估计各因素的相对危险度,为制定肺癌的防治措施提供科学依据。方法:检索2010-2019年国