基于分类引导和多特征聚合的盲图像质量评价

来源 :武汉大学 | 被引量 : 0次 | 上传用户:linyibaby
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着多媒体技术的蓬勃发展和社交网络工具的快速普及,图像作为视觉信息的来源和信息交流的载体被广泛使用。图像在获取和传输等过程中都可能造成不同程度的失真从而导致图像信息的损失,因此如何高效可靠地对图像质量进行定量地评价显得尤为重要。在大部分应用场景中,无论是参考图像信息还是待测图像的失真类型信息都难以获取,而盲图像质量评价旨在没有任何参考图像信息和待测试图像失真类型信息时预测图像质量,因此更具研究价值和实用意义。本课题来源于青年科学基金项目“基于深度卷积神经网络的盲图像质量评价”,围绕自然场景统计特征、卷积神经网络和特征聚合等方向对盲图像质量评价展开了深入研究,主要研究内容包括以下两个部分:第一部分为联合多带通和冗余域的盲图像质量评价(MBRD)。首先,分别从带通域和冗余域进行图像特征的提取来捕获更充足并且互补的图像信息,并基于多个不同颜色空间提取多层级特征以获得更丰富的图像表征。然后,将不同的特征堆叠在一起作为特征图组,采用高斯混合模型来拟合其分布获得其统计特征,并通过费舍尔向量得到最终的图像质量感知特征。最后,建立支持向量回归模型进行图像质量预测。实验结果表明,与基于自然场景统计特征的其他方法相比,MBRD模型实现了更好的主客观一致性,且具有很好的泛化能力。第二部分为基于分类引导和特征聚合的盲图像质量评价(CGFA-CNN)。针对MBRD人工设计特征表达力有限以及无法进行端到端训练的问题,本文提出基于卷积神经网络的模型CGFA-CNN。首先用合成失真的方法构建一个大规模数据集以改善有标签样本的不足,使用图像失真等级和类型信息对模型进行分类预训练作为引导。然后将预训练网络不同深度卷积层的响应联合成特征图组,采用可进行端到端训练的特征聚合层对其进行聚合得到编码向量,并通过预训练阶段的分类结果对编码向量进一步引导得到最终的质量感知特征。最后,用线性回归模型将高维特征映射为质量分数。相较MBRD,CGFA-CNN保留了其联合多种互补特征及适应任何尺寸输入的优势,另外利用卷积神经网络自动学习特征从而改善了MBRD手工设计特征表达力不足的问题,实现了端到端的训练,使得整个网络可通过有标签数据进行优化。实验结果表明CGFA-CNN相较MBRD而言在性能上有很大提升,和其他基于卷积神经网络的方法相比也有明显的优势。
其他文献
2009年,国务院正式批复泰州医药高新区升级为国家级高新区,成为我国首个医药类国家级高新区。多年来,泰州医药高新区不断提升医药产业集群的核心竞争力和持续发展力,完善管理
随着我国汽车行业的蓬勃发展,汽车轮毂的使用量持续增加,轮毂修复的市场进一步扩大。为了修复中高端汽车轮毂的刮擦碰撞等损伤,满足中高端汽车4S店的精准、高效修复的需要,设
小麦条锈病是由真菌条形柄锈菌引起的一种主要分布于湿冷环境的世界级小麦病害,严重威胁着小麦安全生产。尽管施用杀菌剂可以在一定程度上控制条锈病的发生,但这种方法既造成
目的:通过整理和归纳历代医家医著关于治疗禁忌学说的论述,对《内经》及仲景思想治疗禁忌学说的整理,结合温病学相关著作,重点梳理吴鞠通关于温病治疗禁忌学说的内容,阐述治
目前移动设备、交通工具和可再生能源技术都离不开低成本、长寿命、高安全性、高容量、高功率和环境友好的储能电池。室温钠硫(RT Na-S)电池因其具有超高的理论容量(1675 mAh g
当前转嫁理论实施的瓶颈在于转嫁比例量化困难,这导致在司法实践中已经出现反垄断民事诉讼案例的背景下,我国转嫁抗辩和间接购买者规则相关领域立法仍然缺失。从法经济学的角
胡桃楸是我国东北地区“三大硬阔”之一,有较高的用材及药用价值。土壤干旱是限制其生长发育的重要因子。本研究以2年生胡桃楸幼苗为研究对象,研究在持续土壤干旱胁迫下不同
近几年,以持续推动素质教育改革作为背景,使得教师对于小学美术课程的重视程度有所提升。国画在我国已经有较为悠久的历史,将其融入于小学美术课程当中不仅能够陶冶学生的情
中国画作为传统绘画的一种,在小学美术教学中具有重要的地位。教师在开展美术教学中,应继承并发扬这一优秀绘画,加强学生对中华优秀传统文化的了解,提高学生的审美情趣。本文
节点是结构中重要的受力部位,传递着梁柱之间的内力,提高节点的装配率可提高整个结构体系的装配效果。目前矩形钢管混凝土规程中推荐的方钢管混凝土柱节点连接形式存在着一定