深度视频一致性增强技术研究

来源 :宁波大学 | 被引量 : 0次 | 上传用户:gbqangel
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着3D应用在娱乐业、制造业等行业的普及,如3DTV、自由视点电视、虚拟现实、3D游戏和机器人视觉等,多样的3D应用已经悄然来到人们身边。其中多视点视频系统采用基于深度的绘制技术,而众所周知,获取真实场景的高质量且准确的深度信息一直是计算机视觉的关键问题。然而深度估计获得深度图是每帧单独估计,准确度有限,同时也使得视点间的深度图一致性不强,深度时域不一致会导致绘制视点出现闪烁,用户体验差,视点间的不一致性差,对虚拟视点的绘制质量有明显影响,且导致多视点编码性能下降。针对时域一致性增强,目前大多数算法不能在时间域持续增强深度信息的一致性,且增强作用弱。视点间的一致性增强更具有挑战性,视点不同,存在着遮挡区域、不同光线和阴影的影响,相比时间域存在着更多不一致的深度信息,准确性更难以度量。本文即对以上存在的问题,提出以下深度视频一致性增强方法:(1)针对深度估计中时域一致性增强方法的不足和多数方法在时间上一致性增强效果持续短,改善幅度较小,深度修正不准确等问题,提出基于运动程度强弱的深度视频时域一致性增强算法,用相对可靠的深度值进行时间范围更长的一致性修正,应用运动分割和彩色信息辅助,结合时空域相关性的加权模型进一步增强深度空域连续性和时域一致性。实验结果表明,本算法有效增强深度视频时域一致性,一致性效果持久,节省编码比特率17.48%~31.75%的同时改善虚拟视点的绘制质量。(2)对存在的深度信息不一致导致合成的虚拟视点质量下降问题,提出了一种自适应的视点间一致性增强算法。首先,对左右视点的深度图进行视点间的深度信息一致性检测,同时创建视点间深度一致性评价值,将左右视点的深度图进行遮挡区域、深度一致区域和不一致区域的划分,结合深度图的边缘信息和深度值连通域的聚类分割,设计自适应双边滤波对深度图做对应的一致性增强,实验结果表明绘制视点的PSNR平均提高0.13dB,同时一定程度改善绘制视点的主客观质量。(3)面向多视点深度视频编码提出一种多视点深度视频一致性增强方法,以左中右三个视点为输入深度视频源,设计它们的深度信息交换方案,结合视点间一致性检测对视点间深度信息做融合,获得映射目标视点的新深度图,应用SIFT算子进行深度图尺度不变特征匹配,针对匹配的特征点进行仿射区域验证,锁定视点间匹配的局部区域,对多个视点的局部区域和整体做深度值一致性增强加权优化,依据一致性评价值进行迭代增强,从而达到实现多视点深度一致性增强的目的,实验验证该方法可节省多视点视频的编码码率4.10~13.68%。
其他文献
目的 探讨麻醉方式的选择对合并肺动脉高压产妇剖宫产术中血流动力学及母婴术后结局的影响。方法 回顾性收集2011年1月1日至2017年12月31日南京大学医学院附属鼓楼医院收治的
我国城市管理领域的行政处罚实行的是相对集中行政处罚权制度,该制度自实行以来,在加强城市管理、改变城市面貌方面发挥了重要作用。但在运行的过程中,引发了许多社会矛盾,诸
信任是和谐的人际关系与良好的社会协作的基础。信任是指在人际交往的过程中,个人基于对他人或者群体的期望愿意承担和接受风险的心理状态。盲目的信任他人,可能会使得自己落
有关乡村治理的学术研究和政策研究,著述颇丰。但问题是,过于宏大、抽象的宏观理论分析与专注于个别经验的微观研究,以及各种建言献策,似乎不能对乡村治理的经验事实带来多大
本文介绍了一种地坪漆刮涂设备的结构设计及制造过程,将传统的手工作业方式加以创新,设计成一款集称重、配比、刮涂于一体的机械设备,并在生产实践中加以应用。
通过对高位池养殖的斑节对虾体长和体质量的跟踪测量,研究了其生长特性及规律,结果表明,斑节对虾体长和体质量呈幂函数关系:W=9.613×10-6L3.069,b接近于3,呈等速生长;其生长
针对当前英语词汇和英语口语的教学需求,结合实际的教学情况,借助文本的自动分类、自动标注和信息检索技术,结合网络和人工的方法,建立大学英语口语语料库。通过对语料库中涉
为了解高校图书馆参考咨询延伸服务读者需求,笔者于2013年6月13日~16日以问卷调查的方式对中山大学图书馆内的读者进行调查。调查结果表明,当前读者主要通过网络获取信息,他
目的:通过检测2型糖尿病(type 2 diabetes mellitus,T2DM)患者血清C1q/肿瘤坏死因子相关蛋白9(CTRP9)、白介素-6(IL-6)等水平,一、探讨血清CTRP9与肥胖、T2DM患者慢性炎症、
以我国中部地区公共图书馆为例,分析公共图书馆数字参考咨询服务本地化管理现状,从人力资源、管理机制、服务方式等方面对公共图书馆数字参考咨询服务本地化管理进行探讨,以