基于深度学习的视频预处理算法研究和优化实现

来源 :浙江工业大学 | 被引量 : 0次 | 上传用户:awaydown
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着智能电子产品的普及,视频成为了人们获得信息的重要方式且视频图像的质量将直接影响用户的体验。视频预处理算法能够对采集到的视频图像进行恢复和提升,为用户获得高质量的视频画面提供可靠的保障。本论文是面向视障人群的智能视觉辅助技术研究。对视频进行抓拍,首先使用超分辨率图像重建算法对抓拍到的图像进行放大,接着通过图像去噪算法对放大后的图像画质进一步提升,最后采用图像翘曲矫正算法对去噪后的图像进行矫正,从而为后续的文字识别系统提供高质、可靠的保障。同时,由于深度学习在计算机视觉领域获得了较大的成功,因此本论文主要基于深度学习并对视频预处理算法中的超分辨率图像重算法、图像去噪算法以及图像翘曲矫正算法进行研究和优化实现。主要工作内容如下:(1)超分辨率图像重建算法研究。提出了一种拉普拉斯金字塔结构的团网络超分辨率图像重建算法。该算法采用拉普拉斯金字塔结构,通过特征提取和图像重建,渐进的重建高分辨率图像。使用改进的集团块作为网络的构建模块,其卷积层间既有前向连接又有反馈连接,层间信息交替更新,以便信息流和反馈机制可以最大化,层间的连接更加密集。同时将残差学习应用到网络中,减少网络参数,避免梯度爆炸。(2)图像去噪算法研究。设计了一种基于OCTNet的快速图像去噪算法。该算法使用Oct Conv卷积结构作为网络基本构建模块的一部分。该构建模块将输入分解为对应的高低频特征图,卷积层间采用频内特征与频间特征进行信息更新,从而有效地减少网络计算资源的消耗。再分别经过批量标准化与激活函数后获取构建模块的输出。同时,将残差学习引入网络,通过残差学习来训练残差映射,残差学习与批量标准化结合使用,不仅可以加速网络在训练过程中的收敛速度,同时可以避免梯度消失和梯度爆炸带来的问题。(3)图像翘曲矫正算法研究。针对现有的图像翘曲矫正算法进行研究并优化。该算法网络结构由形状网络和纹理映射网络组成,形状网络对翘曲图像进行3D重建,纹理映射网络对3D模型到2D平面进行映射,从而完成对翘曲图像的矫正。本论文设计了使用U-Net++网络结构对形状网络进行优化,该网络结构可以通过特征叠加的方式对不同频率的特征进行整合,从而充分利用不同深度的有效特征,以提升网络的整体性能。同时,实现了使用剪枝对网络进行优化,以减少网络参数。
其他文献
无线传感器网络是由传感器节点之间通过无线通信自组织的通信网络,该技术构成了物联网的核心技术之一,应用场景涉及军事、医疗、农业、地质等广泛的领域。为了应对无线传感器
随着科技的不断进步,医疗技术的不断更新,以往不能完全治愈甚至是无法医治的各种疾病逐渐地得到了完全的医治。但是仍然存在一些尚且无法医治的疾病,甚至还没有确切的诊断标
城中村作为我国城市化进程中的特殊产物,已成为现代城市发展中极不协调的因素,对城市形象、城市治安与环境、城市居民生活、城市社会和谐与稳定等都会产生负面影响。随着城市
本选题试图突破以往研究的内容和方法,站在情报学角度,应用文献计量以及相关的情报分析方法,以《云南丛书》更好地开发利用为目的,对《云南丛书》的内容和实际价值进行深层分析研究,并在此基础上,对《云南丛书》的开发利用问题进行探讨。论文就理论意义而言,为《云南丛书》的研究提供了新的研究视角和研究方法;就现实意义而言,为《云南丛书》在现代信息技术环境下的开发利用提供了一定的解决思路和方法。通过研究,本文力图
大型海洋基桩是近海海洋结构物桩基础的重要组成部分,其自身为内外壁光滑的薄壁长圆筒钢桩,其起吊作业一直是海洋结构物施工建设工程中的一大难题。本文通过对现有各类型的大型海洋基桩吊具的结构特点以及夹持方式进行对比分析,发现现有基桩吊具往往对基桩管壁进行单侧夹持,基桩易发生较大的受力变形而且吊具对同一规格不同管径的基桩的适应性较差。针对这一现状,本文以IHC公司的双边海洋基桩吊具为蓝本,提出一种“内外夹持
随着人们对保护生态环境愈发重视,水中微生物失衡造成水生态污染的现象也更加普遍,微生物识别对于水质检测及污水处理领域具有重要意义。传统微生物识别方法效率低下,成本高
自1978年中国改革开放以来,中国的经济以人类历史上前所未有的速度快速发展,并于2011年跃升为世界第二大经济体。房地产行业作为国民经济的重要组成部分,其不断扩大的产业规
云在全球辐射平衡和水汽输送中扮演着不容忽视的角色,开展云参数研究对气象要素保障、人工影响天气、作战行动的展开等都有着积极意义。论文利用我国最新一代静止轨道气象卫
表面肌电信号(surface electromyography,s EMG)作为人体运动控制系统的指令信号,蕴含着丰富的运动相关信息,对肌电信号的解码有助于控制系统利用其预测人的运动意图。基于肌
融合了控制、监测、管理和优化决策的现代集成智能制造系统是自动化系统的发展方向,其中过程监测技术是保障流程工业安全稳定运行的关键技术。然而由于现代流程工业系统复杂,