基于立体视觉的增强现实技术研究及其应用

来源 :福州大学 | 被引量 : 0次 | 上传用户:tatimess
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
增强现实技术由于其虚实融合的特点,能够增强人们对现实场景的感知能力和交互体验,已成为计算机科学领域的热门技术。针对基于内窥镜视觉导航微创手术中的人体内部解剖结构错综复杂、病灶区域定位难等问题,增强现实技术开始被应用到手术导航当中。通过将术前影像等先验信息叠加到即时的手术画面中,给予医生“透视”导航效果,从而实现对病灶的直观三维显示及精确定位,提高手术成功率。本文重点探索和研究基于立体视觉的增强现实技术应用在盆腔微创手术中存在的问题及解决方案,具体的研究内容如下:首先,针对术前影像重建的3D模型与内窥镜视野下的2D目标区域的配准难的问题,本文提出基于颜色一致性的3D/2D配准方法。利用显露在内窥镜的部分骨盆组织来完成术前3D模型到2D目标区域的初始化配准,缩短了人工配准时间,提高了配准精度。与此同时,提出3D模型的可视点快速检测法和仿真实验环境的制备方法。其次,针对内窥镜的定位问题,本文提出两种定位算法:基于3D模型的摄像机定位算法和基于立体视觉的摄像机定位算法。在3D模型与2D目标区域重叠对齐的条件下,通过最小化模型可视点的光度测量误差来优化摄像机的帧间相对位姿。实验结果表明,此定位算法的估计轨迹精度较高。然而,该算法的鲁棒性需满足以下三个条件的场景:3D模型与真实物体的形状完全一致;3D模型与真实物体完全配准对齐;真实物体的表面大部分能够被观测到。在现实手术场景应用中,该算法存在一定的局限性。因此,本文进一步提出基于立体视觉的摄像机定位算法。首先采用具有多种优良特性的ORB(Oriented Brief)作为定位算法的特征提取及匹配的特征算子,并对立体匹配算法进行改进;接着使用立体光束平差法(Bundle Adjustment,BA)和立体三维点云优化进行估计摄像机位姿,并通过局部地图优化以减少累积误差。实验结果显示,基于立体视觉的定位算法具有较高定位精度,且满足一定的实时性。最后,本文将增强现实技术应用于仿真盆腔微创手术导航。首先介绍了系统总体框图以及实现细节,然后通过位姿优化线程、局部地图优化线程和增强现实显示线程实现导航系统,并在仿真骨盆模型进行算法验证。同时,在未知摄像机真实轨迹的情况下,提出通过评估3D模型与真实物体的重叠程度来定性判断摄像机位姿估计的准确性,实验结果表明此系统具有良好的增强现实显示效果。
其他文献
随着产业升级进程的加快,企业间的竞争变得愈发明显。对于中国的生产企业而言,通过融资和获得国家的相关补贴已变得不切实际,因此越来越多的制造企业开始将主要精力集中在降
罪刑法定原则的内涵是法无明文规定不为罪,这必然要求司法人员对个案作入罪之时遵循入罪的形式解释立场,即入罪的形式化。罪刑法定原则仅是入罪的限制原则,并不限制出罪,对不值得科处刑罚处罚的行为予以出罪也是其应有之义,即出罪的实质化。而我国目前刑事司法实践中恰恰秉持的正是入罪实质化与出罪形式化的立场,鉴于此,在当前的司法语境下,提倡入罪的形式化与出罪的实质化就具有十分重要的司法指导意义。本文试图通过刑事司
随着经济市场的不断发展,冷藏冷冻生鲜农产品的市场需求逐渐扩大,因此,冷链物流业的市场需求也在不断的加强。为了适应市场需求,农产品冷链物流经营模式的创新迫在眉睫。笔者
《普通高中英语课程实验标准(实验)》指出,积极开发和合理利用课程资源是英语课程实施的重要组成部分。英语报刊阅读选修课的开设成为21世纪推进素质教育的重要手段。英文报
制造业市场竞争环境巨大变化,新时代下的供应链库存管理能力是企业抢夺市场、战略制胜的关键要素之一,因此企业需要通过一套完善的库存管理指标,科学、客观地进行评价,以实现对供应链库存的有效管理。本文以制造行业竞争环境变化为背景,以显示行业龙头企业B公司为研究对象,针对公司库存管理能力低下的问题,基于供应链库存管理思想及平衡计分卡理论,进一步分析了库存管理问题、管理指标设计不足的原因,并借鉴平衡计分卡工具
随着调强适形放射治疗(intensity modulated radiation therapy, IMRT)的开展,为了确保IMRT的高梯度变化的剂量准确实施在患者身上,治疗前的剂量验证成为质量保证(quality as
经济社会的发展必然导致市场交易的活跃,合同是市场交易中最为常见的凭证,其触角已经伸向社会生活的方方面面。与此同时,违背诚实信用原则,利用合同进行诈骗的案件也逐年增多,合同诈骗罪成为一种典型的经济犯罪,呈现出复杂性、隐蔽性的特点,令许多受害人难以察觉。笔者在从事审判工作期间发现,在司法实践中合同诈骗犯罪案件与合同民事纠纷案件存在很多交叉地带,经常发生合同民事纠纷被刑事化处理或合同诈骗被民事化处理的错
通过对瓯江杨府山断面近几年的水质监测数据进行分析,建立了三角函数预测模型,得到各年中瓯江水质各指标随季节交替的变化规律,并运用季节性肯达尔(Kendall)检验法对模型进行了验
随着新课程改革的推进,提高高中英语课堂教学的有效性成为一个重要课题,人们更加注重教师的导学地位和学生的主体地位。导学案的出现是新课改的产物,是提高英语课堂教学有效
"人类命运共同体"理念是一种具有人类普遍性价值的新的文明发展观,它指向的是对人类未来文明形态的构想。它既超越了中华传统文化中的"天下观"和现代世界体系中的"西方中心论