基于深度图像绘制(Depth-image Based Rendering, DIBR)的自由视点视频能为用户提供一定范围内任意的视点画面,有望成为下一代数字视频标准。DIBR自由视点视频的实现涉及到图像校正、立体匹配、多视点编解码和虚拟视点绘制等关键技术。目前,这些技术存在着诸多问题：现有的图像校正方法未考虑到视点间的缩放、旋转等问题,在鲁棒性和高效性上尚待提高；当前的立体匹配算法效率低下,且在遮挡、低纹理等区域难以准确匹配；虚拟视点绘制方法在处理画面中存在的伪影和空洞方面仍然存在较多缺陷,影响了视点的绘制质量。本论文针对DIBR自由视点视频中存在的问题,提出了一种非对称的编解码方案,研究内容涉及到了高效立体匹配、鲁棒性图像校正、多视点编解码、高质量虚拟视点绘制等关键技术的算法实现,并对3D立体显示方法展开了探讨。本论文的主要工作内容和创新点如下：1)针对DIBR中的存在问题,提出了一种DIBR自由视点视频的编解码方案,该方案将立体匹配,图像校正,多视点编码等计算繁重的部分交予发送方完成,接受方仅需负责相对简单的解码与绘制。这种不对称的编解码配置方案充分考虑到了发送方与接受方的计算能力,接受方仅需轻量级的计算,降低了用户接受显示设备的要求。2)针对多视点间的旋转,缩放,遮挡等问题,提出了一种基于SURF特征点匹配的颜色校正方法,实验表明,该方法具有较好的鲁棒性,通过颜色匹配,可以有效提高多视点编码的压缩效率,并能改善虚拟视点的绘制质量以及立体观看的舒适度。3)针对当前全局立体匹配算法效率低下以及在遮挡区域难以准确匹配的问题,提出了一种高效的基于分层置信传播的立体匹配新方法。该方法首先采用局部匹配获得初始代价,并根据初始匹配的结果检测遮挡和误匹配像素；其次,使用平面估计对初始代价进行了修正,以改善遮挡区域的匹配效果；最后使用改进的分层置信传播快速估计最小化能量,降低了低纹理区域的误匹配,提高了整体的平滑度。实验表明,该方法在匹配准确度和速度上具有较高的性能。4)针对DIBR虚拟视点合成中存在的伪影和空洞,提出一种基于深度和图像的视点绘制新方法。首先,该方法使用视点同步生成机制得到虚拟视点的图像和深度信息,并根据深度信息擦除背景伪影；其次,通过基于深度的空洞填补和边界处理方法进一步消除视点图像中的空洞和前景边缘失真。实验结果表明,与MPEG的3DV／FTV标准参考方法相比,本文生成的虚拟视点PSNR值提高了2dB,画面效果明显优于标准参考方法。