基于特征融合的光场图像质量评价研究

来源 :浙江工商大学 | 被引量 : 0次 | 上传用户:supercow
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着信息和数字化媒体技术的飞速发展,人们对视觉内容服务的需求快速增长。光场(Light Field,LF)作为一种新兴的视觉媒体,可以在视觉上为用户带来良好的浸入感和临在感,目前已广泛应用于计算机视觉领域,如三维重建,虚拟现实和深度估计等。然而在光场图像不同阶段的处理过程中,会不可避免的发生失真效应从而导致图像质量的恶化。为了指导和监管光场图像的获取,处理及应用,设计与人类视觉系统(Human Vision System,HVS)相一致的的光场图像质量评估模型至关重要。目前许多图像质量评价方法已经被提出,但是对于包含4个维度结构信息的光场图像并不适用。传统图像质量评价模型对光场图像的特征提取不足,现有的光场图像质量评价算法往往依赖高复杂度的特征提取,并且大多只在单一形式的二维图像上进行质量评估,如光场空间域的子孔径图像(Sub-Aperture Images,SAI)或光场角度域的极平面图像(Epipolar-Plane Images,EPI)。本文采用深度学习的方法分别从光场空间域和角度域的角度对光场图像进行质量评价,进而扩展到基于特征融合的光场图像质量评价。本文主要工作如下:(1)提出一种基于空间域的光场图像质量评价方法。由于相同失真类型下的SAI,其相邻图像间只有细微的差异且图像内容大多类似,本文设计了一种光场自适应图像质量评价网络模型(LFSA IQA Net)。将光场空间域SAI按照不同的视点角度分为四个方向的图像堆栈,LFSA IQA模型根据输入的不同图像堆栈,自适应地生成质量预测网络所需参数。实验结果表明,所提方法可以很好的符合人眼视觉对光场图像的主观感知特性。(2)提出一种基于角度域的光场图像质量评价方法。EPI反映了光场角度一致性,因此利用EPI中的特征信息可以评估光场图像的角度失真。由于EPI在物体边缘区域才出现明显的失真效应,为了减少计算复杂度和提高训练速度,本文利用低复杂度的EPI边缘感知区域块代替整幅EPI作为网络模型的输入。对实验结果进行定量分析表明,所提方法可以准确的反映人类视觉特性对失真光场的主观判定。(3)提出一种基于特征融合的光场图像质量评价方法。光场的多维特征可由其空间域的SAI和角度域的EPI共同体现,本文设计了一种光场特征融合的图像质量评价网络模型(LFFF IQA Net),首先将从SAI和EPI中提取到的全局语义特征和多尺度内容特征,在通道维度上进行融合,得到的多尺度内容融合特征和全局语义融合特征分别参与动态参数的生成及质量分数的预测。对实验结果进行定性和定量的结果表明,与现有的质量评价算法相比,所提方法在光场图像质量评估上表现出优异的性能。
其他文献
免疫层析法(Immunochromatographic assay,ICA)因具有操作简便、检测快速、价格低廉等优点,而被广泛应用于环境监测、医学检测、食品质量安全等检测领域。在免疫层析检测过程中,反应信号的标记物是影响免疫层析检测灵敏度的关键因素。因此,制备和寻找新型标记物成为了近年来免疫层析技术研究的热点。无机颜料具有颜色鲜艳,价格低廉,无毒无害,分散性和稳定性良好等特性,很好地满足了成为有色
学位
淀粉消化的调控对于Ⅱ型糖尿病的预防与治疗具有意义。淀粉通常与蛋白质共存于食物复杂体系中,在人体淀粉消化的内环境中也有蛋白质或多肽的存在。本论文以猪胰腺α-淀粉酶(PPA)与小麦淀粉(WS)作为研究对象,研究了还原型谷胱甘肽(GSH)和酪蛋白酸钠(NaCas)分别及共存条件下如何影响淀粉或酶的结构及性质,继而影响淀粉消化,最后拓展到其他物质,研究拮抗或协同效应的共性规律,旨在为营养膳食的配方设计提供
学位
水电项目投资金额较大,对水电建筑企业而言,每个项目的实施均可能影响企业的持续性发展。基于新时代政府对水电项目的战略变化,企业竞争加剧,如何更好地开展经营管理,降低风险成本成为水电建筑企业需要思考的重要问题。对此,文章结合水电建筑企业现状,分析影响其经营管理的因素,进而提出经营管理的优化策略,期望为新时代背景下水电建筑企业的经营管理提供参考。
期刊
甲状腺结节患病率高,临床上治疗该病的药物剂型众多。对近年来治疗甲状腺结节的药物剂型,如传统的汤剂、散剂、丸剂及现代的颗粒剂、胶囊、片剂、口服液等进行归纳、总结,指出各个剂型治疗特点、临床运用现状及工艺制备的优缺点,同时展望了各剂型发展的前景,为进一步深入研究治疗甲状腺结节的药物剂型提供一定参考。参考文献38篇。
期刊
南美白对虾因味道鲜美,营养丰富,深受消费者的青睐。由于其高蛋白和高水分的特点,容易受到微生物的污染和多酚氧化酶的催化氧化,发生腐败和黑变,从而影响虾的商业价值。壳寡糖作为一种碱性氨基寡糖,具有抗菌、抗氧化、高安全性、生物相容性和可生物降解性等优点,已经被广泛应用。但是与传统的食品保鲜剂相比,壳寡糖的抗氧化、抑菌等活性较低,限制了其在食品行业中的应用。化学修饰是提高壳寡糖生物活性的最有效方式之一,本
学位
蛋白质是食品中重要的营养物质之一,多酚类化合物普遍存在于植物性食物中,如蔬菜、水果、种子和叶茎等是我们日常饮食中多酚的重要来源。蛋白质与多酚的共价结合会使所修饰蛋白质的分子构型和功能性质发生显著改变。因此,探究蛋白质与多酚之间的相互作用,改善修饰蛋白质的功能性质,对食品工业的发展具有重要意义。本论文通过两种不同方法制备了蛋白质与多酚的共价复合物,探究了新型共价复合物的理化性质、体外消化和在Pick
学位
食物过敏是免疫介导的对某些食物产生的不良反应,通常由无害的食物蛋白抗原触发,是Ig E介导的速发型超敏反应,会引起胃肠道、皮肤和呼吸道以及心血管异常,甚至有过敏性休克风险,危及患者的生命。研究表明,肠道微生物群对健康的免疫调节和肠道屏障功能的发展至关重要,可以促进对病原体的免疫反应和对食物等无害抗原的全身性低反应性;益生菌可通过调节肠道菌群及其代谢产物,诱导口服免疫耐受,进而缓解食物过敏;此外,前
学位
随着互联网的发展,网络社交媒体上的不实信息传播愈加猖獗,如何快速找到匿名不实信息的真实作者成为亟待解决的问题。寻找匿名作者的工作被研究人员分为作者验证和作者识别两个任务,前者判断两个匿名文本的作者是否为同一个,后者从备选作者中找出匿名文本的真实作者。本文主要研究作者验证问题,在作者验证的基础上通过匹配算法进行作者识别问题的研究。传统的基于机器学习的作者验证和识别方法多针对论文、书籍等长文本,可以从
学位
目的:观察妊娠期糖尿病采用参芪降糖胶囊治疗的临床效果。方法:选取2020年8月—2022年8月我院收治的86例妊娠期糖尿病患者作为研究对象,应用单双号分组法分为对比组和观察组,每组43例。对比组、观察组分别应用常规治疗、常规治疗联合参芪降糖胶囊,将二者疗效实施对照分析。结果:观察组治疗后各项血糖指标、母婴结局、临床疗效均优于对比组(P<0.05)。结论:用参芪降糖胶囊对妊娠期糖尿病实施临床治疗,可
期刊
以糯米粉为原料或辅料的淀粉基食品在生产、加工过程中常会出现干硬、脱水、品质下降等问题,因此不同的食品添加剂或其它食品组分比如蛋白质等被用于糯米食品的生产加工中,用以改善产品的品质特性及感官特性。然而,针对糯米这一加工方法,尚缺乏直接的研究结果弄清糊化过程中大米蛋白及蛋白质酶解物与糯米淀粉的相互作用机理,特别是淀粉与蛋白质的主要结合力类型及两者互作对淀粉消化性的影响还有待阐释。本课题着眼于糯米糊化过
学位