面向移动设备的动态目标的光场渲染技术研究

被引量 : 0次 | 上传用户:qwerty_123asd
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着多媒体技术的不断发展,视频技术也需要从二维向三维转变,和普通的二维视频相比,三维视频增加了场景的深度信息,增强了视觉的现实感和逼真感,可以给用户提供全方位沉浸式的感受。三维视频技术可以广泛应用于数字电视、移动设备系统,三维视频会议系统、虚拟现实系统等方面,而其中移动设备系统更为人们所关注,移动设备已经逐渐成为人们进行信息获取、处理处理、个人娱乐等的重要途径。因此人们迫切的希望在移动设备上享受真实感绘制,比如:显示真实感的3DTV、虚拟现实的漫游等等。移动设备由于采用电池供电,存储器空间有限,带宽较小,因此移动设备的真实感绘制系统应具有低功耗和低带宽的特点。传统的计算机图形学是建立在基于3D网格模型的绘制基础上,能否准确的构建成场景的3D网格模型将直接影响最终绘制的效果,整个绘制过程与场景复杂度有关,带来了功耗大的问题。而基于图像的绘制技术(IBR)由于与场景复杂度无关且真实感强等特点,在近十年来成为真实感绘制的研究热点,但由于其数据量庞大,对于移动设备有限的存储空间和带宽非常不利。针对这些问题,本文提出了一种面向移动设备的动态3D目标的真实感绘制技术。主要工作和创新如下:1)针对移动设备存储空间小和带宽有限的特点,提出了一种面向移动设备的动态3D目标的光场渲染编解码器设计。由于3D网格模型来源于图像,降低了人工建模的复杂度。同时,由于具有场景目标的几何信息,场景目标重构所需的图像数量可以大量减少,降低了数据量,有利于低带宽的移动设备的数据传输,实验结果表明,数据量相比基于图像的绘制方法,存储数据量以及传输数据量都得到了有效的降低。2)结合重建的目标的3D网格模型,提出了一种面向移动设备的目标表面光场采样方法,详细分析了光场采样前的可见性问题以及虚拟视点的生成方法。该方法不但可以实现真实感效果,而且可以实现自由视点的绘制。实验结果表明,这种采样方法准确记录了目标向空间发出的光线信息,包括了光线的强度和光线的方向。3)由于采样的光场矩阵包含的数据量较大,不利于视频数据的传输,提出了一种自适应的奇异值分解算法,自动控制光场矩阵的分解级数,解决了人为主观因素的控制,保证重建质量的同时,提高了压缩率。光场矩阵分解后获得目标的表面纹理和视点纹理,采用矢量量化和S3TC压缩算法去除纹理图像之间及内部的冗余信息,实验结果表明,在保证真实感效果的前提下,数据量得到了有效的降低。此外,S3TC算法为图形硬件广泛支持的标准纹理压缩算法,有利于实现光场重建的硬件加速过程。4)提出了一种面向移动设备的光场渲染解码器的硬件架构设计,采用自行设计的图形处理器,对光场解码过程进行硬件加速,实现实时绘制。同时针对解码器中负责光场重建的核心单元——纹理映射单元,提出了一种FPGA设计方案,对其中的纹理存储单元(Cache)进行了优化设计,采用了基于4×4压缩纹素块的存取方式,充分地利用了像素间的相关性,提高Cache的命中率,减少了对总线带宽的需求。实验结果表明,该架构可以实现动态3D目标的真实感绘制,证明了本文提出的面向移动设备的动态3D目标真实感绘制的可行性。
其他文献
随着社会的发展、科技的进步,现代工程结构向着大型化、复杂化的方向发展。复杂的服役环境使结构的运行安全日益遭受潜在的威胁,大型复杂结构一旦发生事故,所带来的损失和影响
本文在对国内外物流管理理论和流程再造理论分析和借鉴的基础上,结合XX医药集团的实际情况,采用规范分析与实证分析相结合、定量分析与定性分析相结合的研究方法,对XX医药集
文章以花石头青海云杉母树林为例,介绍了青海云杉母树林的建设及培育技术,分析了青海云杉母树林的经济、社会、生态效益。
立磨是一种用途很广的粉磨兼烘干设备,可广泛地用于粉磨水泥或水泥熟料及其他建筑化工陶瓷等工业原料。立磨在工作原理、研磨机理、机械结构系统、工艺性能等方面以其独特的
研究生教育是我国教育结构中最高层次的教育,肩负着为国家现代化建设培养高质量创造性人才的重任,研究生的培养质量在一定程度上代表了一个国家高等教育的质量、人才培养的水
我国因为地大物博这一特殊的地理环境,造就了各种文化的竞相发展。而如今党的中华民族伟大复兴任务的顺利完成,就需要能够真诚地对待我国悠久的历史文化,了解其特征。本文主
国家电网公司做出了积极推进研究、建设具有中国特色的智能电网的战略决策。公司已开展了多项与智能营销相关的理论研究和实践工作,本方案主要研究智能营销系统中远程抄表和
为了促进发动机振动噪声研究水平的提高,特别是为了深化数字化仿真技术在发动机及整车的振动噪声控制方面的应用,推动数字化仿真技术在该领域的应用向更深、更广的层次迈进,
随着教育虚拟社区的发展,其理论和应用在近几年受到了越来越多的重视。教育虚拟社区归属感,指社区成员把自己归入教育虚拟社区这一共同体的心理状态,这种心理状态既有对自己
现代生命科学、环境科学、材料科学的迅速发展,为分析化学的发展带来了新的机遇和挑战。随着人类基因组计划的顺利完成,从基因水平去认识疾病,认识基因对人类生老病死的控制