计算光场的采集与显示

来源 :中国科学院大学 | 被引量 : 0次 | 上传用户:jackyzero123
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,随着3D电影和虚拟现实的发展,光场技术引起了相关研究人员的极大关注。光场是空间中光线的集合,采集并显示光场就能从视觉上重现三维世界。然而光场是高维度数据,其采集和显示都比传统的2D图像具有更大的挑战性。如何低成本高质量的实现光场的采集和显示是本论文的主要研究内容。我们采用光场4D模型建立了统一的理论框架,并在此基础上深入研究了光场采集和显示的系统原理,提出了创新的算法和系统,并搭建了实物样机进行验证。  在光场的采集方面,为了采集高质量的光场同时又降低硬件成本,我们提出了稀疏相机阵列结构,具有明显的优点:不需要对相机做任何光学改造,信噪比更高,所需相机数量大大减少,硬件成本更低。该方法首先利用稀疏编码学习一个过完备的光场字典,并将原始光场在字典空间映射为一个稀疏的表示系数。由于光场表示系数的稀疏性,我们利用压缩感知成功重建出光场的所有视点图像。  在光场重建过程中,部分光场像素块的重建质量较差,我们称之为光场重建的灾难区。我们发现重建采样值的PSNR和表示系数的稀释度可以提前判断重建光场的PSNR,从而可以预先准确定位到重建光场的灾难区。然后有针对性的处理灾难区,既改善了光场重建质量又减少了光场重建时间。我们分别用5个相机和9个相机构建了两种稀疏相机阵列结构,在多个光场数据中证明了算法和系统的可行性。  在光场的显示方面,我们首先搭建了基于多层液晶的光场显示样机,为后续的算法验证提供了物理实验平台。将光场建模为张量,通过非负张量分解可以求解多层液晶上所有像素的值。我们设计了一种迭代更新式的光场分解算法,占用内存更低,并行化程度更高。考虑到多层液晶本质上是像素复用,一个像素难以兼顾多条光线,这会造成光场显示质量的降低。我们定义了负载系数的概念,通过建立超定方程组来直观分析多层液晶的负载程度,并提出了“多区-多层联合优化”的策略来分解光场,降低了负载系数,在不增加液晶层数的情况下改善了光场显示质量,获得了更高的光场显示亮度。  除了重点研究如何提高光场的显示质量,另一方面我们还重点研究如何提升光场分解的速度。我们利用光场视频的帧内冗余性(空间相似性)构建光场分辨率金字塔模型,为单帧光场分解提供优化的初始值,同时我们还利用帧间冗余性(时间相似性)为光场视频的分解提供优化的初始值。该方法减少了迭代运算次数,加快了运算收敛过程,大大提高了光场分解的运算效率。在光场视频分解实验中,我们的光场分解算法比未优化的算法速度提高了5.9倍。  最后,我们总结了全文工作并展望了光场技术的未来发展趋势。在现有研究工作的基础上,我们从光场采集与深度学习的结合、消除多层液晶的摩尔条纹以及多层液晶的标定等多个方面规划了未来的研究工作。
其他文献
倾斜转弯(BTT, Bank-to-Turn)控制技术可以改善制导武器的机动性、准确度、射程等性能,因此在远程、高精度的制导炸弹的设计中得到了人们的重视。BTT滑翔增程制导炸弹在飞向
超近程主动防护系统作为反导防御体系的最后一道屏障,是未来战场防御发展的一个重要方向,对其研究有着重要的军事意义。超近程主动防护系统主控制器主要实现系统的火控解算并
随着捷联惯性技术和惯性传感器的不断发展,基于微惯性器件的导航系统正在成为导航领域的一个研究热点。本文研究基于MEMS惯性器件的高动态捷联惯导算法,首先介绍了捷联惯导系统
多摄像机监控网络已在重点公共区域广泛铺设。近年来,公众参与社会公共活动的积极性不断提高,各种人群聚集现象在公共场所频繁出现,随之而来的安全隐患问题日益突出。相关部门在
传统的工程检测仪器由分立的各功能模块部分通过有线的方式组成,设备体积大、功耗等级高、连接复杂、抗干扰能力差。随着嵌入式技术、微电子技术和无线传输技术的不断更新,工
时序数据是在应用中经常遇到的一类数据类型,研究对时序数据的描述与理解具有重要的实际意义。对时序数据的特征提取是研究的基础问题之一,它关系到其后续的更高级任务的成败。
对个人隐性知识的转化与应用研究具有重要的理论和现实意义,本文新提出了一种基于数据挖掘与知识分离的个人隐性知识的间接转化方法,并对转化后的知识进行应用研究。首先基于
目标匹配识别技术是数字图像处理和模式识别中的一个重要研究方向,无论在军事上还是在民用方面都有着重要的应用价值。该问题的有效解决,可以使自动目标识别和目标跟踪等相关
遥感图像变化检测技术在自然灾害监测、国土资源规划管理、军事目标打击评估等众多军民领域都有重要的应用价值。虽然遥感图像变化检测研究已经取得了很大的进步,但仍然处于探
电弧炉炼钢是主要的工业炼钢方式,由于电弧炉是具有三相强耦合、高度非线性和不确定性的复杂被控对象,同时目前对电弧炉的控制要求越来越严格,本文提出了几种自适应模糊控制的方