基于多模态感知融合的自然环境精准三维重建

来源 :南开大学 | 被引量 : 0次 | 上传用户:liyongrubylian
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
对非结构化的自然环境进行实时、精准的三维实景重建是机器人的应用场景由城市化环境延伸至野外环境的核心问题。然而,当前研究面临着系统精度不高、重建效果差、实时性不强等亟待解决的问题。本论文设计与研制了一套搭载于移动柔性扫描机器人上的多模态融合感知系统,并开展了针对自然环境精准三维重建的理论研究,主要内容包括:1、基于外参与模体结构同时估计的多模态系统建模与标定。本论文设计了一套针对野外自然环境扫描重建作业的多模态融合感知系统,将远景系统与近景系统结合完成多模态坐标系的统一化。建立了融合系统与所感知环境的联合观测模型,并采用外参与模体结构同时估计的方法对系统进行了标定。通过实验与原始方法进行误差分析对比,验证了外参与模体结构同时估计方法准确性高,实用性强。标定得到的精准外参为数据配准与三维重建提供精确的系统参数。2、基于点云与影像融合的多尺度自适应自然环境重建。多模态系统集成了具备可远距离稀疏点云式精准测距的激光雷达模块,及近距离高精度散斑成像的深度摄像机,因而可兼容自然环境下远、近景三维重建的功能。本论文提出了一种基于点云与影像融合的多尺度自适应三维自然环境重建方法,以深度阈值作为全景扫描指标的尺度自适应切换策略。针对远景重建,通过对点云特征点设置阈值,拒绝对应图像特征点中的外点完成激光辅助图像实景重建。通过实验验证了本文提出的策略更好的满足了自然场景中全景重建的需求。3、基于DFNN的重建空洞修补方法以及基于视觉-惯性测量融合运动修正的实景重建效果优化方法。这两种实景重建优化方法改善了点云与影像融合实景重建的空洞问题。借鉴生成式对抗网络设计编码器和解码器构成的生成器网络模型,判别器网络模型与生成网络模型互为镜像。此外,针对图像多视角的三维重建方法易造成的实景重建结果空洞及场景复杂性(如拐角区域)下无平移增量造成的重建效果交叉分层等问题,通过联合最小化惯性测量单元预积分约束以及滑动窗口中视觉重投影误差矫系统运动估计。最后,对提出的两种方法进行实验,在准确性,完整性等指标上进行分析,验证了所提方法的有效性和实用性。
其他文献
学位
禽致病性大肠杆菌(avian pathogenic Escherichia coli,APEC)作为一种分布广泛的革兰氏阴性菌,可引起鸡、鸭、鹅等多种禽类发病。由于APEC具有人兽共患的潜力,因此,加强对APEC的防治具有较高的公共卫生学意义。APEC毒力因子种类繁多,VI型分泌系统(Type VI secretion systems,T6SS)作为APEC毒力因子中的一种,在APEC的致病过程中
学位
分布式太阳能高温空气布雷顿循环系统运行可靠性高、无需耗水、结构简单灵活、发电和能量综合利用效率高,具有较大的发展潜力。结合低成本储热可进一步提高发电稳定性、提高系统利用效率,适合我国一些太阳能资源丰富但水资源和电力匮乏的偏远地区。本文研究了耦合储热的10 k W级太阳能高温空气布雷顿循环系统,开展了储热、回热和透平机械关键部件的研究以及系统准稳态建模、运行策略分析。开展以莫来石蜂窝陶瓷为储热介质的
学位
人类社会进入21世纪以来,信息技术已经渗透到人们的生活中。化工材料领域无疑是当今世界上最具挑战性和最具影响力的高科技领域之一,是很多其他行业不可或缺的基础。化工材料行业中也在不断地进行信息化建设,由于国家建设以及化工材料行业内部建设的需要,化工材料行业中信息化系统的数量不断增多,然而随着系统增多以及行业内部需求的增多,其中的管理工作也变得愈发困难的同时引发了更多的问题产生。因此本文针对化工材料领域
蒸馏作为工业中最常用的传质分离方法,广泛应用于生产生活的各个方面。传统的蒸馏体系存在能耗高、能源利用效率低的缺点。绝大多数能量在冷凝的过程中被当作废热散失到环境中。在国家大力倡导“碳达标,碳中和”的今天,节能减排的意义重大,因此亟需一种高能效的蒸馏系统。为解决现有蒸馏体系能源利用效率低的问题,设计并搭建了一种基于热电制冷原理的高能效蒸馏装置。利用制冷片热端释放的热量实现蒸馏的加热过程,冷端产生的冷
学位
学位
随着全球化趋势的不断纵深发展,国际局势变得愈加复杂和敏感,恐怖主义问题已超出单一国家或地区的地域限制,逐步演变成全球性的社会政治问题。从“9·11”至今20年的国际反恐历程不难看出,恐怖主义正日益成为一个困扰绝大多数国家的难题。当前,稳定的国际环境成为各国经济发展和社会进步的重要前提。在这一国际背景下,能否有效打击防范恐怖主义,不仅关乎各国自身核心利益,还关系到全球范围的和平与稳定。本文主要从国际