基于结构光的快速高精度深度感知

来源 :中国科学技术大学 | 被引量 : 0次 | 上传用户:aiming5968f
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着人们的追求不断提高,传统的二维成像技术已经不能满足需要。现在,越来越多基于三维图像的技术不断涌现,丰富了人们的生活,也促进了科技的发展。为了获取真实的三维图像,我们通常要对场景或物体进行深度感知。结构光技术是一种被广为使用的深度感知技术。本文基于结构光技术,针对如何快速进行高精度的深度感知这项研究提出了一些新的方法。首先,本文回顾了深度感知领域的基本知识,详细介绍了基于结构光的深度感知的基本概念,系统搭建方法以及模板设计的发展历史。接下来,本文着重介绍了三项研究工作,可伸缩深度感知系统,利用散斑解决相位展开问题实现快速高精度深度感知以及利用ToF深度相机解决相位展开问题实现快速高精度深度感知。可伸缩深度感知系统利用了时分(TM)和邻域(SN)这两种广泛使用的结构光深度感知技术。时分技术因其高精度而知名;而邻域技术因其低延时而获得青睐。本文提出的可伸缩深度感知框架成功地结合了两种技术的优势。我们的贡献有两点。第一,我们设计了一套混叠结构光模板。这一模板含有相位移动条纹和伪随机散斑两种成分。在混叠模板结构光的照射下,对于静态场景深度信息可由TM技术恢复出来;对于动态场景,深度信息可由SN技术重建得到。第二,本文提出了一个场景自适应的深度感知框架。基于这一框架,我们可以通过运动检测来生成一个全局的或是逐区域的最优深度图。为了验证本文提出的可伸缩深度感知系统,我们开发了一套实时(20fps)的深度感知系统。实验结果显示我们的方法可以在精度与速度之间达到一个良好的平衡。本文还提出了一种新颖的相位移动方法来满足快速、高精度且无含混的深度感知的需要。这种方法的基本思路是在三张相位移动条纹模板当中嵌入同样的散斑信号。加入的散斑信号并不会降低条纹的幅度和使用的频率,但却将帮助我们消除相位含混,即解决相位展开。通过一个鲁棒的依赖于散斑的逐区域投票策略,我们可以最终得到绝对深度。我们使用的是理论上最少的三张相位移动条纹模板,这有利于在延时要求较严格的情况下对场景进行深度感知。此外,本文提出的方法由于使用了高频的条纹,还可以抵抗全局光照的影响。我们基于提出的方法开发了一套实时、高精度的深度感知系统。我们认识到基于ToF技术的深度相机与结构光领域的相位移动技术(PS)有着互补的优缺点。ToF深度相机可以提供实时的深度信息,但是受限于分辨率并且易受噪声的影响。而PS深度相机可以生成精准且鲁棒的高分辨率深度信息,但它的多模板特性也使得延迟很高。本文提出了一种新的融合ToF深度相机与PS深度相机深度输出的方法。其基本思想是用ToF相机输出的粗糙的深度信息来帮助PS方法进行相位展开。在研究中,我们还解决了两个技术难题:跨模态的标定以及无干扰的同步。实验显示,我们提出的方法可以产生精确且鲁棒的高分辨率低延迟的深度信息。本文最后总结了全文的工作,并且对一些有意义的问题进行了探讨。
其他文献
多年生黑麦草是一种优良的冷季型草坪草。介绍了近几年来黑麦草抗逆性的研究进展,概括了干旱、高温、低温、盐碱、重金属等对黑麦草的危害及植物体的抗逆性应答反应,列举了提
城市热环境是下垫面结构特征、城市人为热、气候条件等多因素综合作用的结果。近年来,随着全球气候变暖和城市化进程的加快,大量自然地表不断被城市地表所替代,产生了更为显著的
在花生田中设置了3个生态区:杀虫灯区、杀虫灯+红麻+蓖麻区和对照区,对花生金龟子进行了诱杀调控对比,同时采用5种不同嗅味剂配方对金龟子进行了诱杀试验。结果表明,处理区蛴
本文是一项针对虚拟现实新闻(VR news)叙事的探索性研究。结合叙事学理论和分析框架,本文对迄今国际主流媒体推出的代表性虚拟现实新闻作品——包括《纽约时报》全部上线的虚
科学研究表明,肿瘤相关巨噬细胞M2型极化在各种类型肿瘤的血管生成、肿瘤生长以及转移等过程中扮演了重要的角色。在肿瘤组织中,巨噬细胞的不同作用支持着肿瘤的生长或是癌细
针对复杂高层与超高层建筑结构设计中的影响因素进行简单讨论,常见的影响因素包含风荷载、抗地震能力以及地基建设情况等,且基于复杂高层与超高层建筑结构设计的要求,提出针
无政府状态是国际格局的前提,国际格局即是无政府状态下国际关系的结构。然而,在研究国际格局的定义时,国内学者较少关注它的前提,由此造成对国际格局的说明缺乏必要的理论背