基于深度图透视的二维到三维视频转换算法研究

来源 :北京大学 | 被引量 : 0次 | 上传用户:a2422431
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
基于深度图的透视(Depth-Image-Based Rendering,DIBR)技术广泛应用于立体视频应用领域。基于深度图的透视技术使用已有的平面视频中的一个场景和对应的深度图像产生新的虚拟的视角图像。   但是在DIBR技术的实际应用中有一些不易解决的问题,比如出现空洞和产生虚拟图像的过程中消耗了巨大的计算量,以及缺乏有效的客观评价方法。   为了解决这些问题,我们在本文中提出了一种应用于立体三维电视(3DTV)新的先进的基于深度图的透视技术。提出的新的DIBR技术包含了一种新的深度图预处理方法和一种新的多方向外插填洞技术。在新的深度图预处理方法中,我们先后使用了两个平滑滤波器,不连续保留平滑滤波器和基于直方图的平滑滤波器。在新的填洞方法应用在复杂的非闭塞区域(空洞),我们使用领域像素的特征来估计纹理从而判断外插的方向。这样,我们既达到了满足了高视觉质量的要求也达到了在传输深度图过程中减少比特率的目的。此外,我们提出了一种新的客观测量方法用于有效地评价不同的DIBR技术。最后,为了面向实际应用,结合提出的DIBR技术,我们提出了应用于一种新的2D到3D立体视频转换技术。   实验结果证明在使用高质量深度图合成虚拟视角图像的过程中,提出的DIBR技术对比传统的DIBR技术提供更好的立体视频视觉质量。   本文着重研究DIBR技术中的深度图预处理和填洞算法部分,包括提出了一种用于有效的测量不同DIBR技术的客观评价方法,其主要工作如下:   1.在深入分析传统DIBR技术中的各种深度图预处理技术的基础上,提出基于直方图平滑的概念,阐明了使用提出的基于直方图预处理技术的可行性及优势,使用Matlab语言编写了包括提出方法在内的四种预处理方法。实验结果证明了DIBR技术预处理模块的正确性。   2.针对传统DIBR技术中的各种填洞方法的种种不足,根据真实人类视觉系统观看舒适度的特性,提出一种基于像素的动态L型模板估计的多方向外插填洞技术。该方法可以改善填补虚拟视图中较大空洞区域出现的背景纹理不匹配的缺陷,提高合成的虚拟视图图像质量。使用Matlab语言编写了包括提出方法在内的五种填洞方法。实验结果证明了DIBR技术填洞算法的正确性。   3.基于DIBR技术特点,从合成虚拟图像质量的角度提出了一种有效的用于比较不同DIBR技术的客观评价方法。该方法可以弥补了DIBR技术领域缺乏有效客观评测方法的缺陷,在保证采用相似强度滤波的深度图的前提下,通过对各种DIBR技术的合成图像质量进行比较来评价DIBR系统,同时证明了提出的DIBR技术的先进性。   4.面向3D立体视频实际应用的需求,提出一种基于块匹配深度估计和色彩分割产生深度图自动的2D到3D视频转换技术。该方法利用基于区域的色彩分割与块匹配深度估计技术产生深度图,结合提出的DIBR技术,自动将2D平面视频转化为3D立体视频。实验结果证明提出的转化系统获得令人满意的结果。  
其他文献
三明治式电容加速度传感器是一种重要的微机械惯性器件,具有分辨率高、动态范围大、温度特性好和噪声低等优点。在航天航空导航、导弹制导、石油勘探等领域具有广泛的应用。 
作为下一代电子器件的发展方向之一,分子电子学受到了人们的持续关注。金、铂电极以其高导电性和化学惰性常用于分子电子器件中,而单壁碳纳米管作为结构完善、电学性能优异的准
为了解全县农副食品加工业的现状、在全县工业经济发展中的作用,对全县农副食品加工企业进行了调研.通过调研了解,全县农副食品加工业总体生产较好,企业经济效益、创新能力有
EPC总承包模式,作为一种全新的建设工程承包模式,审计对象和审计重点都发生了变化,在国内尚无相关审计政策情况下,探索对EPC总承包模式实施必要的审计类型,成为一个全新的课
目的:探析儿科呼吸系统疾病采用纤维支气管镜的诊治作用.方法:回顾性分析我院呼吸科在2015年5月~2019年5月收治小儿呼吸系统疾病244例,采用纤维支气管镜诊断和/或治疗,评价疗
目的:分析在儿科呼吸系统疾病中使用家庭雾化吸入糖皮质激素治疗的效果.方法:将2018年1月至2018年12月在我院就诊的患儿中随机选择70例,均对其采取家庭雾化吸入糖皮质激素的
钻井工程的成本构成较为复杂,明确其成本影响因素,可以为成本控制工作的改进提供有利支持.本文首先对钻井工程施工成本的主要影响因素进行了总结分析,并结合实际情况,制定了
为了防止ESD失效,学术界和工业界做了大量的努力,从ESD的物理机制的研究到开发出相应的保护结构及电路等,可以说取得了相当大的成效,但是随着器件尺寸正在从传统的深亚微米向45和
开展党内活动不仅能够提升党组织的战斗力,而且还有利于保持和发扬党组织的先进性.建筑施工企业基层党组织开展党内活动是提高建筑一线广大党员党性觉悟、提升基层党组织凝聚
综合办公楼是办公中心,活动中心和指挥中心.不仅能满足生产和工厂领导者的需求,也有强调企业文化建设的重要.在这篇文章中,分析了建筑设计和办公建筑的融合,它将提供一个综合