基于深度网络的视频质量评价的研究

来源 :湖北大学 | 被引量 : 0次 | 上传用户:xiaolianzhang
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着多媒体技术和互联网技术的迅速发展,越来越多的信息通过图像/视频这类视觉载体来呈现,这样更能直观地展现真实世界里的事物.图像/视频信息在最后呈现给终端用户前,要经过采集、压缩、存储和传输等处理阶段,在这期间会因为各种因素引入失真,这会导致用户感知的图像/视频质量下降.因此,对图像/视频质量评价方法的研究越来越重要.随着深度学习的火热发展,卷积神经网络在计算机视觉的领域取得了突破性的进展.然而,目前已有的基于卷积神经网络的图像质量评价方法,大多都还停留在只使用一个卷积层的层面.深度卷积神经网络作为一种强大的特征学习器,可以直接从图像上学习出高层语义的卷积特征.并且多层的卷积神经网络,在图像分类、目标检测等计算机视觉任务中展现了强劲的性能.因此,本文根据现有方法的不足,提出了以下一系列无参考图像/视频质量评价的方法:(1)本文提出了一种基于多任务AlexNet的无参考图像质量评价方法.首先针对不同失真图片可能存在不同尺寸的问题,对失真图像进行局部对比标准化并无重叠地裁剪成32 × 32的图像块,以统一卷积神经网络输入的图像块尺寸.然后,采用多任务的策略,将图像的失真类型识别和图像质量评价的任务统一到卷积神经网络内部.使用并行的多任务策略,可以让网络学到更具鲁棒性的特征.在测试阶段,经由多任务AlexNet可得待评价图像的各图像块的失真类型和质量分数,然后采用选择权重法,以各图像块的加权质量分数作为待评价图像的质量分数.最后,在LIVE图像质量评价数据库上的实验,验证了本算法的有效性.(2)本文提出了一种基于多任务AlexNet的无参考视频质量评价方法.由于本文所提出的基于多任务AlexNet的无参考图像质量评价模型,在LIVE图像质量评价数据库中显示出了优越的性能.本文将基于多任务AlexNet的无参考图像质量评价方法,推广至无参考视频质量评价任务中.先将图像质量评价卷积神经网络在视频数据库上微调预训练好,然后用来预测每帧视频的质量分数.接着,使用时间滞后池化模型模拟人类视觉系统的滞留效应,来对各视频帧的质量分数进行修正.最后,将修正后的视频帧质量分数的平均值作为待评价视频的质量分数.在LIVE视频质量评价数据库上的实验,验证了本算法的有效性.(3)本文提出了一种基于深度特征融合的无参考视频质量评价方法.该方法的提出,源于进一步将多任务AlexNet这种卷积神经网络推广至视频质量评价任务中.首先,将预训练好的基于多任务AlexNet的卷积神经网络在LIVE视频数据库上进行微调,将进行图像质量评价的卷积神经网络迁移至视频质量评价中来.然后,将该网络作为特征提取器,提取各视频帧的特征,结合局部聚合算子,得到每个视频的特征,并用主成分分析法进行特征降维.最后,使用支持向量回归来得到各视频的质量分数.在LIVE视频质量评价数据库上的实验,验证了本算法的有效性.
其他文献
《初中思想品德课程标准》指出:“坚持正确价值观念的引导与学生独立思考、积极实践相统一是课程的基本原则。”教学情境设计,恰能赋予学生思考和实践的机会,符合课标的要求。它还可以帮助学生内化知识、提高学习效率,同时也能提升教师的理论素养,为其专业化发展奠基。教学情境设计已成为基础教育课程改革以来,新的教学理念所带来的必然选择。但教师在设计情境过程中依旧存在一些问题,导致教学效果不佳。本文围绕初中《道德与
长周期地震动因含有丰富的低频成分而易使自振周期较长的结构发生震害,且会导致长周期结构的位移响应时程具有明显区别于普通地震动的“大位移与长持时”特征,因此,研究长周
建国初期,吉林省的财政经济形势较为严峻。为了恢复与发展本地经济医治战争创伤,缓解解放战争和抗美援朝战争对财政造成的压力,吉林省委和省政府积极响应党中央和东北局的号召,在城市和农村展开了大规模的“增产节约运动”。吉林省节约检查委员会、吉林省抗美援朝分会以及主要负责工业生产的吉林省总工会和农村农业互助组等机构负责了运动相关事宜,对运动进行了有效的组织和领导。结合抗美援朝运动的爱国主义教育,初步构建了全
基于渤海装备石油机械厂员工绩效考核现状分析和问题分析的结果,利用目标管理法和关键绩效指标法(KPI)这两种绩效考核理论,本文设计出一套较为科学、合理、可行的员工绩效考
目前,可扩展标记语言XML已经成为了互联网上数据交换和数据处理的一种重要标准。为了更好的存储和管理XML数据,研究者们提出了很多XML编码方案,根据这些编码方案的特点可以将
近邻传播聚类算法(Affinity Propagation,AP)是近年出现的一种新型无监督聚类算法,具有很好的普适性,但其在应用中存在以下不足:(1)在处理结构复杂、包含噪声、边缘数据点多
国内外相关研究资料表明,在大型制造车间的生产活动中,整个产品生产周期90%~95%的时间,工件都处于等待或搬运过程的状态,所以建立灵活有效的物流调度系统对于车间的生产活动具
随着科技的不断进步和更新,移动互联网云计算与大数据的产生和普遍应用,使得个人及企业不得不随时面临着外部环境的更新、变化,并且在我国已经实行了许多年的生育政策决定了
近年来,随着互联网应用业务的快速发展,互联网流量也随之迅速增长。互联网服务提供商需要不断的寻找提高资源利用率和传输速度方法的步伐。其中,CDN(内容分发网络)成为了基础
现阶段,我国农业产业化发展存在着经营机制落后、生产规模小、资金短缺、风险水平高等问题。其中资本形成不足、缺乏资本支撑、发展资金短缺是制约农业产业化发展的核心问题