多特征融合的移动机器人视觉里程计研究

来源 :国防科技大学 | 被引量 : 0次 | 上传用户:dvdpp
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
视觉里程计(Visual Odometry,VO)是同步定位与建图(Simultaneous Localization and Mapping,SLAM)的核心技术之一。随着机器人技术由理论走向应用,对视觉里程计在不同环境中的鲁棒性和精度提出了更高要求。本文利用环境中的点特征、线特征及面特征,针对视觉里程计中特征匹配及位姿估计模块分别设计了多特征融合的解决方案,有效提升视觉里程计在不同环境中的精度与鲁棒性。针对特征匹配,本文提出了一种基于图神经网络的点线描述子融合方法,应用融合后的描述子实现特征匹配。本文利用图结构表示图像中的点与直线特征,结合图神经网络能有效聚合图结构信息的特性,达到描述子融合的目的。首先提取图像中的点特征与直线特征,将点特征与直线特征的描述子与特征的位置进行编码,得到图结构中的节点。在建立边时,没有采用全连接的结构,只对具有特定几何关系的节点建立边,节省了存储空间。采用图注意力网络框架对节点信息进行聚合,为了进一步提升图注意力层的表达能力,引入了多头图注意力机制,将多个独立的图注意力层的输出结果拼接在一起,作为最终的输出结果。通过不同场景下与多种描述子的特征匹配对比实验,验证了本文提出的描述子与其他描述子相比,在匹配精度和鲁棒性方面均有明显优势。针对位姿估计,本文通过对环境中的点线面特征进行统一表示,设计了点线面同类残差模型以及异类残差模型,并结合非线性最小二乘法对位姿进行优化求解。本文首先用退化二次曲面对点线面三类不同特征进行统一表示。在此基础上设计点线面同类残差模型,给出了点与点重投影残差、线与线投影残差、线与线正交投影残差、面与面投影残差以及面与面正交投影残差的具体形式。构建同类残差模型的非线性最小二乘模型,采用非线性优化方法对位姿进行优化求解。在同类残差模型的基础上,设计点线面异类残差模型,给出了点线共线残差、点面共面残差、线面共面残差以及线面正交残差的具体形式,同样采用非线性优化方法对位姿进行优化求解。在不同图像序列下开展实验,选取性能出色的同类残差模型以及异类残差模型。整合选取的同类残差模型以及异类残差模型,与现有主流的视觉里程计算法进行对比试验。实验结果说明融合多类残差后,在不同场景下视觉里程计的精度都有提升。
其他文献
MEMS(Micro Electromechanical System)电磁式微镜属于微光机电系统。由于其具有体积小、功耗低、精度高、响应速度快等诸多优点,在光通信、生物化学、医学成像以及消费电子产品方面有着广泛的应用。但是微镜系统在实际中容易出现不可逆的故障,严重影响相关产品的生命周期,因此研究MEMS电磁式微镜的故障模式及诊断方法,预测其生命周期,提前更换相关部件,对MEMS电磁式微镜的推广及
学位
期刊
新冠肺炎是一种新型的呼吸道传染病,它的出现对世界的发展和人类的生存造成了严重的威胁。新冠肺炎患者的肺部CT图像具有特异性,若能加以正确判读既可对核酸检测的结果进行补充,又可提高诊断的准确性。但由于该类图像复杂且量大,可胜任的医生相对不足,目前对其进行判读的效率和准确性都还不能满足需要,因此人们迫切需要新的技术和方法用于其辅助诊断。计算机视觉技术的出现使计算机有望能够像人眼、人脑一样识别、理解图像,
学位
利用接收地面辐射源信号到达多颗卫星的时差(Time difference of arrival,TDOA)和频差(Frequency difference of arrival,FDOA)并结合已知高程可以确定其位置。该技术由于其定位精度高、可瞬时定位等优势,已逐步得到关注和应用。由于实际一次过顶过程中,卫星会多次截获同一辐射源信号并进行定位,若对多次定位结果进行融合,可以进一步提高定位精度和消除
学位
近年来,随着多智能体深度强化学习方法的快速发展,多智能体深度强化学习技术广泛应用于多智能体合作、竞争以及合作-竞争等诸多应用场景当中,在实际应用当中发挥着重要作用。如何有效地应对环境的非稳定性和简化策略学习过程,是当前复杂合作-竞争环境下的多智能体系统亟需研究和解决的两个挑战性问题。为此,本文针对上述两个问题展开研究,提出了基于增强策略泛化能力的敌-友深度确定性策略梯度方法和基于目标分层分组通信的
学位
在三维模具模型图的生产绘制过程中,经常出现三维模具图的零件模具过多,建模环境复杂等问题,造成的设计加工困难。在这样的背景下,如果通过人工的方式对三维模具进行标注和干涉检测,不仅时间效率上十分低效,而且会造成三维标注的冗余和混乱。因此,解决三维模具模型的自动标注和干涉检测是关键性的问题。UG(Unigraphics NX)软件自带的标注模块和干涉模块需要人工输入标注或干涉检测的对象,无论从时间效率角
学位
文章从深度学习理念的角度,对幼儿户外自主游戏的组织方案进行了全方位分析,首先介绍了幼儿游戏教育的背景,其次说明幼儿户外自主游戏的开展现状,指出部分教师在游戏中未能发挥引领作用、幼儿户外自主游戏材料种类有限、游戏时长的控制存在难度等问题,最后根据现状与问题,提出了有针对性的解决方案,指出应在教师层面、环境层面与幼儿层面对幼儿户外自主游戏进行优化设计。
期刊
[目的]探讨肠道菌群及其相关代谢物肌苷单磷酸脱氢酶1 (inosine monophosphate dehydrogenase 1,IMPDH1)在结直肠癌(colorectal cancer,CRC)肝转移中的临床意义。[方法]选取CRC非肝转移(CRCNLM)及肝转移(CRCLM)患者各9例。采用16S rDNA测序检测患者粪便,采用液质联用技术检测微生物样本中的代谢物,并筛选出与肝转移相关的
期刊
以压电陶瓷为核心元件的压电陶瓷执行器因具有高定位精度、快速响应和输出力大等优点而在微纳米定位系统中被广泛使用。但是,压电陶瓷执行器的率相关迟滞特性会严重影响系统性能。因此,研究迟滞特性的建模方法并补偿迟滞对控制系统的影响,对提高控制系统的性能具有很重要的意义。本文介绍了压电陶瓷的工作原理和相关特性,然后对目前广泛使用的建模和控制方法进行了归纳和总结。由于Bouc-Wen模型具有非常简单的形式和更少
学位
在RH炼钢法的生产精炼工艺中,需要对盛有熔化铁水的钢包进行移动顶升的操作。钢包需要顶升至高处,使上部的浸渍管深入到钢包内的钢液液面以下进行脱气反应等工作,其顶升高度与钢液距离钢包开口距离和钢渣层厚度有着直接关系。目前该步骤仍由经验丰富的炼钢工人通过肉眼观察,并手动控制钢包至合适位置。由于温度达1650℃的液钢辐射非常大,对人的眼睛有很大损伤,对顶升的稳定性、可靠性都存在巨大的安全隐患,迫切需要包括
学位