基于多特征的立体视觉不舒适度预测模型研究

来源 :杭州电子科技大学 | 被引量 : 0次 | 上传用户:coolsun070279
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
相较于二维图像和视频,立体图像和视频由于携带了深度信息,能为用户提供了身临其境的现实感和更丰富的场景信息。但碍于当前立体显示设备和立体内容制作的技术局限,用户在观看立体图像/视频时常伴有视觉不适感,这种不佳的观看体验严重阻碍了立体多媒体服务的普及。因此,为了提升立体图像/视频的观看舒适度并保护人类视觉系统的安全健康,须先对立体图像/视频的感知不舒适度进行预测。由于开展立体视觉主观评价需要专业的实验环境和设备,要消耗大量人力物力,因此需开发一种面向立体图像或立体视频的感知不舒适度预测客观模型,来客观评价立体感知的不舒适度。基于上述研究背景,本学位论文分别从立体内容的特征信息出发,围绕立体视觉不舒适度的客观预测模型展开,对特征提取和回归模型进行了分析研究,进而提升了立体视觉不舒适性的预测精度。总体而言,主要工作贡献如下:·提出一种采用极端梯度提升树回归模型进行多域特征融合的立体图像不舒适度预测模型。该模型从立体图像的视差信息出发,提取高视差均值和低视差均值等6种视差分布特征;结合人脑中颞区(medial temporal,MT)视觉皮层的神经元响应特性,提取3种立体视觉神经活动特征;根据彩色图的色彩分量信息提取了影响立体视觉舒适度的3种颜色特征。本模型采用机器学习中的极端梯度提升树回归模型(e Xtreme Gradient Boosting tree,XGBoost)来模仿视觉处理过程,将上述三类特征进行特征融合后输出立体图像的不舒适度预测值。在不同的立体图像数据库上的实验结果表明,本文提出模型的预测性能优于当前基于特征提取的立体图像不舒适度预测算法。在IEEE-SA立体图像数据库上皮尔逊线性相关系数、斯皮尔曼等级相关系数和均方根误差的实验结果分别达到0.8805,0.8044和0.3809。·提出了一种基于Gabor变换的多特征立体视频不舒适度预测模型。首先通过设置Gabor滤波器的不同频率和方向从变换域中提取了彩色帧多尺度的复杂纹理信息,然后从光流法获取视差帧中提取视差统计分布特征,并根据视频帧的帧间信息提取水平运动、垂直运动和深度运动特征,将提取好的多类特征通过XGBoost机器学习训练器以获取立体视频不舒适度分数。在不同的立体视频不舒适度评价数据库上的实验结果表明,该模型的预测性能优于当前已有的立体视频不舒适度预测算法,其中在EPFL立体视频数据库上皮尔逊线性相关系数、斯皮尔曼等级相关系数和均方根误差的实验结果分别达到0.9569,0.9570和6.1885。
其他文献
故障诊断是确保工业体系可靠高效持续运行的关键技术。随着工业信息化和智能化的深入发展,故障诊断方法逐渐由基于信号处理的方法迈向基于深度学习的方法。图神经网络是基于深度学习发展起来的一类处理图数据的方法,其具有较好的性能和可解释性。本文将采集的传感器信号建模成故障样本图并基于图神经网络提出了三种旋转机械故障诊断方法,其主要工作如下:(1)基于图神经网络的电机转子无监督故障诊断方法。该方法首先采用快速傅
学位
房地产行业作为一个国家的支柱性产业,一直受到各个国家的严格管控,相关的调控政策也随着市场环境的变化而不断演变。2016年底中央经济工作会议指出,要坚持“房子是用来住的、不是用来炒的”的定位,综合运用金融、土地、财税、投资、立法等手段,加快研究建立符合国情、适应市场规律的基础性制度和长效机制。这次会议首次提出“房住不炒”的概念,标志着新一轮大规模调控政策的正式启动,相比以往,这次调控范围更大,调控手
十九大报告中提出“加快建设创新型国家,创新是引领发展的第一动力,是建设现代化经济体系的战略支撑”。在当今科技发展势头强劲的全球化浪潮中,各国之间科技实力和创新能力的较量愈演愈烈,增强我国科技水平,加快建设科技创新型国家已成为国家战略目标。突出科技型企业科技创新能力提升,强化科技型企业创新的主体地位,有利于推动国家经济发展和科技进步。科技发展离不开政府的扶持,我国颁布了一系列政策激励科技型企业发展,
随着海洋资源开发进度的快速发展,海缆技术的应用越来越广泛,海底电缆作为跨海物联网工程的重要组成部分,在跨海通信、电能传输、海洋新能源开发等重要领域起着无可替代的作用。但由于自然因素和人为因素的影响,海缆难免会受到损伤与破坏,并产生一系列安全问题。由于海缆自身结构复杂、运行环境恶劣,导致海缆的维修工作极其艰难,因此设计一款能实现海缆自主巡检的AUV对于海缆维修具有实际意义,如巡检过程中根据故障点衰减
学位
2021年是“十四五”计划的第一年,该计划提出建立高水平的社会主义市场体系,想要实现该计划,首先要激发各类资本的活力。国有企业是国有经济战略支撑力量,构建社会主义和谐社会的关键体系。“十四五”规划对国有企业提出了三个方面的新要求:优化经济结构和结构调整,完善有中国特色的现代企业制度,完善资本管理监督制度。国有企业要想紧跟十四五规划要求,推进深化改革,就要对其内部控制体系进行优化。基于此,从国有企业
环戊烷并多氢菲碳骨架与不同的官能团侧链相连接的四环脂肪烃是甾体化合物基本结构,大多数的甾体类成分结构中含羰基。其稳态失调与多种疾病的发生发展密切相关。由于甾体化合物结构相似、体内浓度低、离子化效率差、易受生物基质中其它成分干扰,通常通过衍生化试剂对该类成分进行衍生化,再进行液质联用分析。为了研究双羰基甾体化合物的衍生化行为,本课题利用经典的羰基衍生化试剂吉拉德T对双羰基甾体化合物进行衍生化,并利用
据统计,我国建筑能耗大约占了社会总能耗的30%,在建筑能耗中,暖通空调能耗占据40%以上,如果空调设备“带故障运行”,其能耗大约会增加20%。及时发现故障状态,采取必要的维修措施,可以提高设备能源利用效率,降低设备故障停机造成的风险和损失,制冷系统故障诊断技术正逐步成为研究的主要热点之一。本文旨在研究基于数据驱动的制冷系统故障检测、诊断方法,提出基于距离特性的神经网络故障诊断方法,采用ASHRAR
海底电力电缆主要应用于岛屿供电、跨海域电网连接、海上风电场等领域,但因海底电缆自身结构复杂、运行环境恶劣,导致海缆易发生缆体损坏甚至断裂等故障。为减少故障发生,需要对海底电缆的运行状态进行定期巡检,提前发现潜在风险。本文针对国内目前海缆巡检和维护困难的情况,设计了一款海缆巡检自主水下航行器(Autonomous Underwater Vehicle,AUV),并对AUV机械结构、动力学建模、水动力