基于稀疏表达联合迁移学习的盲图像质量评价

来源 :武汉大学 | 被引量 : 5次 | 上传用户:nfx0123
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着物联网、云计算、大数据、人工智能等信息技术的推广,图像作为重要的信息载体被广泛使用。而拍摄环境、传输存储方式等因素会引起图像失真,进而影响图像的视觉效果(图像质量)。图像质量客观评价是利用计算机模仿人类视觉感受评估图像质量的好坏,其中,盲图像质量评价是指在无原始图像信息情况下,不需考虑失真的类型和数量,直接对图像质量进行评价。盲评价更加接近人的主观评价方式,具有良好的通用性和扩展性,研究价值更高,应用前景更广。在高分辨率对地观测系统重大专项中,多光谱立体图像压缩项目提出使图像主客观一致性达到95%以上的研究课题。本文以提高评价方法的主客观一致性为目的,首先结合HVS特性提出多种盲图像质量评价方法,然后提出联合迁移学习的评价方法,最后给出可在嵌入式硬件平台上实现的评价方法。具体包括以下研究内容:首先,结合HVS的视觉注意和稀疏表示特性,提出了盲图像质量评价的显著区稀疏特征(SFOSR)方法。该方法从三个部分对基于码本的CORNIA方法进行了改进。第一部分是利用显著性信息有条件地筛选图像局部特征描述子,取代了随机提取方式,有效剔除图像冗余信息,增加字典对局部关键信息的表达能力,在保证评价效果的同时减少了字典原子数量。第二部分是利用稀疏编码算法训练超完备字典并计算编码系数,较聚类分析和主成分分析的编码系数,稀疏编码的表达系数更加适合量化图像失真程度,也符合HVS的稀疏表示特性。第三部分提出了 Max-Pooling联合l1范数的特征提取模型,输出高效鲁棒特征。实验证明,SFOSR评价方法降低了字典原子数量,提高了评价的主客观一致性,且具有良好泛化能力。其次,从HVS多信道特性和系数矩阵分解角度出发,提出了盲图像质量评价的双尺度稀疏系数能量拆分特征(DSSESF)方法。对于交叉下采样二叉树结构的图像集合,分别进行稀疏编码,得到图像的双尺度稀疏系数。双尺度分析符合HVS多信道特性,较SFOSR方法的单尺度分析,改善了对信息描述能力不足问题。针对Max-Pooling联合l1范数的特征提取方式会造成信息丢失和浪费问题,DSSESF采用基于奇异值的能量拆分法分解每个表达系数矩阵,然后执行特征提取操作,此方式有效降低了信息丢失。实验表明,结合了人眼多信道特性的DSSESF方法进一步提高了对图像质量的预测精度,但泛化能力没有明显提升,且稳定性略有下降。再次,SFOSR与DSSESF在处理高维空间小样本时,随着特征维数升高,针对传统机器学习方法训练的预测模型稳定性下降,且泛化能力得不到显著提升问题,提出了稀疏特征联合样本实例迁移的盲图像质量评价方法。完成知识迁移需要构建辅助数据集,辅助数据集由辅助样本库(VOC-Distortion)的特征集和客观标注集(Predicted-Labels)组成,通过失真处理生成辅助样本,通过客观评价辅助样本得到Predicted-Labels。VOC-Distortion包含大量样本,利用样本实例迁移学习算法TrAdaBoost.R2从辅助数据集中迁移有用知识,帮助高维特征训练预测模型。迁移学习利用数据集之间的相关性提高了预测模型拟合效果,有效克服传统方法处理高维空间小样本时的局限性,既提升模型预测精度又增强了稳定性和泛化能力。此外,还提出了一种基于特征自学习迁移的评价方法,即在VOC-Distortion上学习空域特征字典,在特征字典上采用自学习迁移方式得到鲁棒性更强的空域重建特征(Reconstruction Features Of Spatial Domain,RFOSD),然后利用传统机器学习方法训练预测模型。实验结果证明,迁移学习改善了高维空间小样本学习的有效性和稳定性,联合了迁移学习的评价方法获得了更高的主客观一致性,具有较强的稳定性和泛化能力。最后,针对目前盲评价算法计算复杂,硬件实现困难等问题,提出基于小规模超完备字典投影特征(SSODPF)的评价方法。SSODPF计算输入图像在小规模字典上的投影特征,利用其与标准投影特征间的距离来量化图像质量,有效减少了计算量。以高分辨率对地观测系统拍摄的多光谱压缩图像作为实验对象,结果表明,对同一场景固定压缩类型失真图像,SSODPF方法的质量预测分值随压缩比呈单调变化,主客观一致性满足项目需求。在多核嵌入式平台TMS320C6678上,采用特征拆分方式完成硬件并行加速,进一步减少算法计算量,最终实现SSODPF方法对多光谱压缩图像质量的实时评估。本文从特征提取和预测模型构建两个部分对盲图像质量评价展开研究,本文方法具有较好的鲁棒性和实时性,其中联合迁移学习的评价方法为盲图像质量评价领域的研究提供了一个新的思路。
其他文献
<正> 元代诗人范(木亨)字亨父,又字德机,其籍贯为清江县,古今并无异议。至于清江当今何地,今人之见,颇显分歧。《辞海》范(木亨)条以为清江即“今湖北恩施”,《中国文学发展史》、《宋元明诗三百首》、《元明清诗文选》、《元明清诗选注》等均同此说。《中国历史大辞典·辽夏金元史卷》范(木亨)条以为清江在“今江西清江西南”,《中国诗话》略同于此。《中国古代诗话选》范(木亨)小传更认为清江“今属湖北”。据《元史·地理志》夔州路施州条:“唐改清江郡,又改清化郡,又复为施州。宋因之。旧领清江、建始二县。元
为了实现数据中心异构操作系统的整合,解决单一存储扩容造成的服务停机,数据库、服务器、存储或备份设备等因单点故障造成数据的丢失,提出了基于虚拟化技术的统一存储平台的
<正>耀目锤镰,旗卷井冈,南湖起航。披荆斩棘行,伟策长征;扫平倭寇,打倒蒋帮。救国救民,换天改地,力主沉浮破天荒。阴霾荡,腾舞华夏龙,屹立东方。谱写历史新章,中枢英明奋进康
期刊
T.Leavelle,Aqzzouz B在巴拿赫空间和巴拿赫格的共轭空间中分别引入了(L)集和几乎(L)集的概念,它们分别在刻画巴拿赫空间的空间结构和巴拿赫格的序结构方面有重要应用.本文利用(L)
本文想谈几个问题:一、班主任工作中应用控制论的意义;二、控制论的基本原理在班主任工作中的应用,三、结尾的话.-、班主任工作中应用控制论的意义第一,控制论是“有关自动机
自国际金融危机爆发以来,尽管目前美元汇率保持着相对稳定和强势,美元资产在国际储备中的地位依然牢固,但美元资产存在着诸多不确定性和风险。在目前金融危机背景下,应对IMF
目的:为了调查山羊沼液经1d发酵后,其中营养成分的变化,以及发酵后的沼液能否达到国家相关排放标准.方法:采用国标法测定了发酵前后沼液的pH、总氮(TN)、氨氮(NH3-N)、总磷(TP)和全钾(TK).
设集合Ⅰ,∧是任意的非空集合.当θ=∧’&#215;包含∧&#215;Ⅰ时,本文研究了半群Pθ(Ⅰ&#215;∧)的幂等元结构;论证了半群Pθ(Ⅰ&#215;∧)是完全拟正则半群。
从物理和化学的角度,介绍了纸的基本组成,分析讨论了危害纸质图书文献的各种因素,详细阐述了纸质图书文献保护方法和抑制危害图书文献因素的措施。
深圳地铁5号线太安站位于繁华城区,DN400次高压燃气管在布心路段横跨车站,结合周边环境、施工条件、改迁的社会影响等因素,确定对次高压燃气管采取支托保护,此属国内首次,无