用于立体视频的虚拟视点合成方法研究

来源 :山东大学 | 被引量 : 0次 | 上传用户:tlljs
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,立体视频凭借其强烈的真实感、突出的交互性逐渐进入了家庭和大众娱乐市场。随之而来的是,三维电影在各大影院纷纷上映,以迅猛之势占据了电影产业的制高点;三维电视(Three-dimensional television,3DTV)逐渐取代高清电视(High Definition Television, HDTV),成为电视领域的先锋引领者。多视点视频、自由视点视频的最大特点是具有极佳的用户交互性,比如,观众可以根据自己的喜好自由选择观看的角度。在这一类视频应用中,多个视点的视频信息是必不可少的,并且视点的数量是决定视频效果的关键因素。但同时这也对网络带宽和摄像成本提出了严峻的挑战。因此,虚拟视点合成方法的重要性日益凸显。在众多已有的视点合成方法中,基于深度图像的渲染(Depth-image-based rendering, DIBR)是一种典型且有效的方法。它是在已知参考视点彩色图像及其深度信息的基础上,通过三维图像变换来绘制虚拟视点图像的方法。它凭借较低的复杂度、较高的渲染质量等优点,成为视点合成领域的研究热点。近几年,经过众多研究者的努力,目前已有一些较好的科研成果。然而,视点合成的质量仍然受到一些问题的限制,如伪影问题、重叠问题、重采样问题、空洞问题等。只有更好地解决这些问题,才有可能获得高质量的虚拟视图,从而获得令人满意的视觉体验。针对DIBR中常见的几个问题,本文分别基于空域和空时域相结合两个方面,提出了两种不同的方法来改进DIBR方法,分别是基于逆向映射和加入深度信息的图像修复算法的DIBR方法以及基于双向映射的空时域相结合的DIBR方法。第一种方法提出利用逆向映射获得虚拟视图并使用改进的图像修复方法进行空洞填充。该方法用逆向映射取代了传统的正向映射,巧妙地解决重叠、重采样问题;提出一种改进的加入深度信息的图像修复方法,有针对性地选择背景信息对空洞区域进行填充,其中的改进包括优先级计算公式的优化以及最佳匹配块搜索原则的改进,前者可以确保获得一种最佳的修复顺序,后者则是提高空洞填充准确性的关键步骤。第二种方法提出利用空域与时域相结合的方式实现更准确有效地空洞填充。该方法在传统的基于空域信息的补洞方法的基础上,加入了时域信息作为参考,因此可以获得更高质量的虚拟视图;而相较于其他的空时域相结合的视点合成方法,该方法并没有对整个背景信息进行复原,而是针对空洞区域进行反向搜索,定位目标区域,实现有针对性的背景复原,从而大大降低了算法的数据量和复杂度。进行背景复原后的目标区域可以用于填充虚拟视图中的部分空洞,而剩余的空洞则可以使用方法1中提出的图像修复算法进行填充。实验结果表明,无论是在主观效果上,还是在客观评价上,通过上述两种方法获得的虚拟视图都是令人满意的。
其他文献
近年来,随着互联网技术的发展,智能手机逐渐成为人们日常生活中必不可少的一部人。除了传输语音及短信信息,人们还可以利用智能手机共享视频、图片等多媒体信息。然而,由于缺
环境干扰是指影响目标跟踪算法性能的环境因素。在目标跟踪过程中,环境干扰的存在不可避免,抵抗环境干扰对算法的影响一直是目标跟踪领域的热点与难点。目前没有一种跟踪算法
作为智能交通系统的重要组成部分,车型识别系统对于改善交通管理,建设智能城市具有重要意义。相较于传统车型识别系统主要适用于区分货车、客车、汽车等车型大类,汽车细粒度识别
为了解决恶劣水声信道环境下的可靠语音通信难题,基于客观质量评价的水声语音通信模型的研究具有很大的实际意义。本论文主要研究基于参数表示的语音通信质量估测模型,针对水
随着科技水平的高速发展,人类已经步入了全新的网络信息时代,传统的基于口令的认证方式已经不能满足人们对于安全的需求。根据人体的生物特征所具有的终身不变和唯一性,本课
无线通信技术的迅速发展以及智能终端的普及导致了移动互联网时代的来临,无线通信业务量的与日俱增使得现有的无线频谱资源已经不能完全满足人们不断增长的应用需求。认知无
Android自诞生以来就一直在快速发展,如今已经超越Windows成为市场占有率最高的操作系统。但同时恶意软件在Android应用市场中也出现了爆炸性增长,它们的行为也越发猖獗。这些
现有的通信网络是多种网络并存的网络:有线网络和无线网络并存;同种协议不同发展阶段的网络并存;不同协议的网络并存。不同的网络形成了复杂的异构网络环境,在相同的区域不同网
随着无线通信的高速发展,对于频谱资源的需求也越来越多。然而频谱资源是有限的,所以如何将有限的频谱资源合理分配对于无线通信至关重要。认知无线网络因此应运而生。传统的认
在未来无线通信中,由于无线用户数量及业务量的俱增,无线网络在向用户提供各种业务的同时,需保证多业务的服务质量(QoS)要求,另外,随着节能减排与绿色移动通信的需求,在保证