基于小样本学习的无参考图像质量评价研究

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:hyt1217
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
无参考图像质量评价试图通过设计合理的计算机模型以使得机器无需任何的参考图像便可自动地完成对给定图像感知质量的估计。对于现阶段的无参考质评算法而言,其面临着可用训练数据量稀少的困境,致使其在模型容量上受到了极大的限制从而无法在预测精度上得到进一步的提升。该现状表明,在小样本条件下构建有效的模型学习方法已成为当前无参考质评问题的主要矛盾。为解决这一问题,本文以基于小样本学习的无参考图像质量评价这一课题为切入,从弱监督学习、强先验学习和元学习这三个层面对小样本条件下的无参考图像质量模型的构建进行了深入的探讨和研究。主要研究内容如下:第一部分提出一种基于弱监督学习的无参考图像质量评价方法。首先,该算法利用失真图像与其无失真参考之间的误差生成了一种质量偏差图来作为描述其质量的粗粒度标签。然后,构建了一个基于全卷积网络的质量特征编码器来提取图像的质量相关特征,并利用所得的偏差图来对其进行预训练。接着,使用了少量具有主观质量分数的失真图像和其对应的偏差图对预训练过的编码器进行了多任务微调。最后,利用微调过的质量特征编码器来提取的待测图像的质量相关特征,并构建了一个回归模型将该特征映射为最终的质量预测结果。实验结果表明,该算法能够在有限的标签数据下,有效地提升无参考图像质量评价模型的容量,从而提升其质量预测的精准度。第二部分提出一种基于概率图先验关系的无参考图像质量评价方法。首先,该算法基于境联效应[72]这一先验构建了一个概率图模型来描述质评过程中待测图和其背景参照之间的耦合关系。然后,使用了匹配网络[75]来基于所得的耦合关系计算待测图像与其背景参照之间的境联特征。接着,预训练了一个质量特征提取网络来从像素级别提取了待测图像的质量相关特征。最后,利用了全连接网络将上述两种特征进行融合,并将融合后的特征映射为待测图像的感知质量。实验结果表明,先验关系的引入能有效地提升模型在小样本条件下的预测精度,使得该算法对于人工失真和真实失真图像的评价结果都具有很高的主客观一致性。第三部分提出一种基于元学习的无参考图像质量评价方法。首先,该算法在模型的训练数据中按照元学习的通用数据构建方案[56],随机采样出若干成对的支撑集和元测试集。然后,利用了公开的质评数据集预训练了一个基于深度网络的质量相关特征提取器。接着,基于所构建质量特征提取器将支撑集和元测试集中的图像转化为对应的像素级质量相关特征。之后,基于长短时记忆网络(Long Short-Term Memory,LSTM)构建了一个境联嵌入模块,并利用该模块对所得的像素级质量相关特征进行了时序性境联嵌入。同时,该算法还构建了一个距离度量模块来计算嵌入特征间的相似度,并根据所得的相似度计算出元测试集中图像的境联质量分数。最后,将元测试集图像的像素级质量相关特征直接映射为其像素级质量分数,并将该图像的境联质量分数和像素级质量分数进行加权求和作为其最终的质量预测结果。实验结果表明,在使用有限数量标签数据进行训练的条件下,该算法对于各类失真图像均具有很高的评价精度。
其他文献
以不同几何拓扑结构的石墨烯为对象,对其电磁屏蔽效能展开研究,为石墨烯的应用提供新的视角。石墨烯具有高红外透过率和高导电率,将石墨烯应用于光学窗口可以缓解高电磁屏蔽效能和高红外透过率之间的固有矛盾,为更高精度的光学探测器件的发展提供条件。基于高频仿真结构软件(HFSS)对石墨烯的电磁屏蔽效能进行了探讨,研究了在红外透过率一定时,不同几何拓扑结构的石墨烯对其电磁屏蔽效能的影响,分析对比了同一几何拓扑结
现代科学技术的发展使诸多领域呈现新面貌,比如教育呈现现代化发展趋势。教育为国家之基石,也是社会关注的重点,教学是教育领域的主要内容,采用现代化教学方式符合教育发展趋
C县扶贫资金折股量化政策是该县在精准扶贫中一个创新实践,它创新性地在扶贫领域引入市场机制,让效率更高的市场为政府解决扶贫工作效率不高的问题。由于该政策存在政府角色定位不准确、政策对民间资本的吸引力不够、强制性摊派就业指标容易引发就业贫困群众“吃空饷”等方面的问题,政策的具体执行效果没有达到预期,相关部门和乡镇政府发现自己并不能够如愿摆脱过渡干预的弊端。甚至出现了参与项目竞标的企业数量不多,本应由市
中华文明历史悠久,博大精深,源远流长。传统中医学伴随着历史的发展一直流传至今,造福着古今中外的人们。与西方医学最大的不同之处在于,中医认为人体是一个有机的整体,医生需要从多方面了解和系统掌握疾病的相关信息,从而对患者进行有针对性的临床治疗。其独特的“望闻问切”四诊法是中国古代人民智慧的结晶,也是中华文化的瑰宝。面诊是中医望诊的重要环节,也是医生通过面象对病人体内病症进行定位、定性的一种有效的诊疗手
论文选题自医疗健康领域国家科技条件平台的资源中心大数据共享服务平台建设项目。项目目标需要汇聚全国各省市的人类遗传资源等数据,构建可提供给卫健委科研所不同需求的研究人员,以开展大数据分析、挖掘和数据服务的平台。项目有以下问题和需求:1)自建大数据分析平台;2)提供灵活的大数据多维场景分析能力;3)提供分布式挖掘场景分析能力,改变当前使用SPSS等软件的现状,以打破数据量和计算量的瓶颈。针对以上问题和
多年以来,我国经济在发展的道路上稳扎稳打,迈步前进。十九大以后,我国更加明确了新时代的发展导向,环境保护与生态建设也迎来新际遇、新发展,我们应秉承新型理念,建立新兴生态文明,实现经济可持续、生态可持续。环境保护税法律制度的建立、发展、完善,是充分把握时代脉搏的关键之举。加快资源型经济的转型发展,营造更加清洁、更加环保、更加高效的发展环境,是现代化经济体系的新要求。但目前,我国环境保护税法律制度还存
在人类的生活和生产中会遇到需要利用机械装置对易碎、易受压损坏、形状不规则的物体进行抓取,传统的刚性机械手很难胜任这样的工作,而使用结构复杂、控制难度大的灵巧手虽然可以完成上述工作,但开发难度大,成本高昂,不利于推广应用。而选用柔性材料制作的柔性机械手,不仅因自身的柔性而适合对这类物体进行抓取,同时其成本相对较低,控制简单。本文结合国内外大量柔性机械手的成功设计案例,对柔性机械手的驱动方式进行对比分
改革开放以来,随着我国经济的高速发展和对外贸易的不断加强,FDI大量流入我国,成为我国从国际市场引进先进技术,获取资本支持的重要途径。在大众创业,万众创新的大背景下,为了招商引资促进区域企业家精神的发展,重量不重质,盲目引进FDI,成为区域经济发展的一大问题。为此,很有必要联系我国发展中国家的特殊国情,结合FDI和企业家精神在我国的区域分布特性,研究探索FDI对我国各区域企业家精神的影响作用。企业
本文通过理论分析与实证分析相结合的方式研究环境规制对企业技术进步的影响。首先,本文将环境规制分成了命令型环境规制、市场型环境规制、自愿型环境规制三种不同类型,并对三者的特征和差异进行了分析。其次,本文基于经典的双寡头模型建立了数理模型,并引入环境规制变量和技术进步变量,通过数理推导分别分析了命令型环境规制、市场型环境规制和自愿型环境规制对企业技术进步的影响机制。最后,本文将企业技术进步分解成减排生
随着我国经济发展进入新常态,我国宏观经济的增长已经告别高速增长阶段从而进入中高速增长阶段,同时伴随着“去库存、去产能、去杠杆”的不断推进,我国抗风险能力较低的企业的财务风险和经营风险逐渐暴露。并且随着2018年新出台的资管新规的实施及不断升级的中美贸易摩擦,债券市场的信用风险也随之暴露,债券违约事件发生的频率越来高。2014年3月,“11超日债”延迟利息支付成为我国公募债券市场上的首起违约案例,我