基于特征学习的图像和视频去噪算法研究

来源 :中国科学技术大学 | 被引量 : 0次 | 上传用户:idalu
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像和视频作为人类获取外界信息的重要的载体,在采集、获取和传输过程中会因为环境影响混杂噪声,导致图片和视频的细节信息被覆盖,从而干扰人类对原始图片和视频的理解和后续的应用。而图像去噪和视频去噪的目的就是在去除混杂在图片和视频中噪声的同时恢复图片和视频中的边缘信息和纹理信息。目前流行的图像去噪算法和视频去噪算法主要可以分为两类:一类是传统的基于非局部自相似的去噪算法,另一类去噪算法是基于卷积神经网络(Convolutional Neural Network,CNN)的去噪算法。由于卷积神经网络具有强大的特征学习能力等优点受到广泛的关注。本文主要应用卷积神经网络研究图像去噪问题和视频去噪问题。主要的研究工作可以总结如下:
  首先,本文对图片去噪任务和视频去噪任务之间异同进行了分析和解释。以学习图片中的空间特征和视频中的时空特征的角度为出发点开展去噪任务。然后,针对图片去噪任务提出了一种多尺度膨胀卷积残差网络。该算法可以凭借有限的参数量实现具有竞争性的去噪结果。具体来说,该算法提出使用膨胀卷积(Dilated convolution)代替常规卷积减小模型的复杂度,并且据设计了混合膨胀率模式(Hybrid Dilation Rate Pattern,HDP)来设置膨胀卷积层的膨胀系数,有效的解决了使用膨胀卷积带了信息泄露问题。此外,该算法充分考虑了对于图像去噪任务非常重要的低水平特征,设计了多尺度特征提取结构来更好的学习和表示低水平特征。在公开的BSD68数据集上的对比实验证明了我们方法的优越性。
  然后,提出基于增强框架(Boosting framework)的视频去噪框架。首先,该增强框架是通过堆叠几个弱的去噪器来构建的,这种构建方式可以充分挖掘各个弱的去噪器的优点。其次,该增强框架通过可以学习的时空卷积核来学习输入视频序列的时空特征,同步完成视频序列的空间去噪和时间去噪。最后,该增强框架在去噪时不需要参考帧,可以对多帧含噪视频帧同时去噪,这种平行处理机制对于提升算法的去噪效率有很大帮助。
  最后,基于提出的增强框架,本文提出了时空卷积网络(Spatiotemporal convolutional networks,StNet)作为弱的去噪器来构建增强框架。针对级联多个时空卷积网络可能出现的梯度消失问题,本文在设计时空卷积网络的时候,使用跳跃连接(Skip Connection)和残差学习(Residual Learning)来加速网络的收敛。并将搭建的增强框架应用到包括灰度视频去噪和彩色视频去噪的仿真实验中,实验结果证明了该算法在去噪效果和去噪效率上的优越性。
其他文献
摘要:很长一段时间以来,未成年人犯罪是影响我国社会和谐稳定的一个重要问题,特别是近年来,我国的未成年人犯罪率居高不下,引起了社会各界的广泛关注与热烈讨论。未成年人是我国经济社会发展、民族繁荣的重要预备军,如何有效预防未成年人犯罪,强化未成年人法律意识的培养,成为关乎家庭、社会和国家和平稳定的重要方面。基于此,文章主要研究了当前阶段未成年人犯罪的新发展趋势,发现其呈现出明显的低龄化特征。  关键词:
期刊
在身管火器及配套弹药的靶场试验中,弹丸的速度和着靶坐标是主要的测量对象。六光幕精度靶为大斜入射角条件下的全天候、多参数测量提供了可能,一次射击即可实现对任意斜入射弹丸的飞行速度、飞行方向和着靶坐标的测量,具备更大的性能优势与应用前景。目前国内的六光幕精度靶研制工作仅停留在原理样机阶段,其相互分离的靶架与靶体结构使得其外形尺寸较大,且受传统几何法测量模型的解算精度与幕面空间位置间接标定法的限制,其测量精度尚不能满足实用需求。
  为推进其产品化进程,本文针对现阶段六光幕精度靶研制工作中的不足,重点开展
拓扑半金属是具有奇异物理特性和重要科技应用的一种新颖拓扑量子材料。拓扑半金属在其费米能级附近,导带和价带间有重叠的部分而形成有限个点或者节线圈。根据其能带结构及能级简并特征,拓扑半金属主要可分为狄拉克半金属(Dirac semimetal)、外尔半金属(Weyl semimetal)和节线半金属(Nodal-Iine semimetal)。这种拓扑能带结构由于受到时间反演对称性和空间反演对称性的保护,因而拥有很强的稳定性。高压强(high pressure)是一种环境参数,可以缩短材料内原子间距离,增加相
微创手术通过内窥镜为医生提供二维反馈,为避免无深度信息的图像对手术操作准确性的影响,本文研究了SLAM下人体内腔特征点的检测与匹配,从而重建人体内腔环境,使医生得到手术场景的三维反馈,提高手术安全性。首先,进行针对人体内腔环境的图像预处理。由于内腔环境湿润且表面光滑,在光照条件下易产生镜面反射,本文分两步分别进行了绝对明亮区域和相对明亮区域的高光检测,并进行基于中值滤波的高光修复,达到高光抑制的目
无人机遥感技术作为除卫星遥感和普通航空遥感外获取地理遥感信息的又一重要手段,近年来得到了飞速的发展。现代遥感的核心是图像配准技术,而图像匹配作为图像配准技术的关键,其结果将直接对后续要进行的科学研究和实际应用产生影响。无人机航拍获取区域遥感图像时,当航拍区域内存在特殊地貌,现有基于特征的图像匹配算法很难提取到足够数量的特征;并且当因相机位置摆放和遥感平台受周围环境影响产生抖动会造成所获取图像产生局
随着机械工业的迅速发展,机械零件也进入了发展的新阶段。机械零件在加工过程中,会经历切削、摩擦等加工流程,这会导致其表面产生不平整的痕迹。机械零件表面的微观形貌直接影响其使用性能和使用寿命,尤其是高温高压的环境下。二维微观形貌的测量不能获得被测表面的空间形貌特征,为了保证产品质量的稳定性,需要对零件的表面特征进行更加全面、具体的描述。基于此,论文搭建了一套以光切法为原理并结合图像处理技术的表面三维微
我国铁矿资源现状为高品位天然矿产少,贫矿、伴生矿多。铁精矿是钢铁生产的主要原材料,现代化大规模钢铁生产需要对原矿石经过多级选矿处理,制成高品位的铁精矿。针对大规模自动化选矿生产中对不同选矿阶段的品位把控问题,以及铁矿选矿加工中在线采集困难、测试效率低等问题,合理设计铁品位检测装置并实现铁品位现代化、自动化检测十分重要。首先,本文以磁铁矿铁精矿为研究对象,研究了铁品位检测问题。以自感式传感器工作原理
近些年来,随着我国科学技术的高速发展,医疗、健康、地震救灾等领域的对生命体征检测的需求也逐渐提高。超宽带生物雷达技术因其检测精度高、抗干扰能力强、能耗小等优点,逐渐成为一种重要的手段。本文针对生命体征检测中呼吸、心率信息提取的问题,进行了相关研究。主要工作内容概括如下:本文根据生命体征检测中存在的问题,分析了超宽带生物雷达探测人体生命体征的优势,研究了超宽带生物雷达的相关理论知识。本文研究了一种基
经过长期的生存竞争和自然选择,动物和植物进化出了与环境相适应的各种独特功能。随着近代显微成像技术的发展,人们发现在这些动植物表面具有一些独特的微纳米结构,结合表面的化学特性,从而产生独特的功能,帮助生物在残酷的自然选择中生存下来。基于向自然学习进而服务于人类生活和科技发展的理念,仿生学逐渐诞生。
  在制备仿生功能表面结构方面,各种微纳加工手段已被成功运用。然而随着仿生对象结构复杂度的提高,传统平面微纳加工技术由于其复杂造型能力弱,而3D打印技术又具有可选择材料范围窄、效率和精度难以兼顾的局限性,越
微米尺度的液滴(微液滴)在科学研究和工程应用中具有重要的价值。近年来,学者们基于微纳尺度流动方法开发了多种微液滴制备技术,可以一步到位地生成多种结构的微液滴。常见的微流控芯片技术与玻璃毛细管技术均可以在滴模式下制备高单分散微液滴,但都具有较低的通量。毛细流动聚焦(简称流动聚焦,Flow focusing)是一种“高速”的微纳尺度流动方法,其原理为从毛细管流出的流体在另一种流体的驱动下,经过小孔形成