基于多传感器融合的语义SLAM算法研究与实现

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:lin840827247
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来越来越多的智能移动机器人出现在人们的日常生活中,促使这一切发生的关键技术便是SLAM技术。SLAM技术能够让机器人在未知环境中依靠传感器探测周围环境建立相应的地图,同时还能定位其自身所在地图中的位置。目前传统SLAM虽然已经取得了不错的定位建图效果,但其还停留在较为低级的几何特征层面。而通过把环境中的语义信息加入到SLAM中,可以进一步提高机器人对环境的理解能力,当前也已经成为了SLAM领域中一个新的热门研究方向。本文为了研究语义SLAM中不同模态传感器数据的融合以及语义地图的构建,提出了一种基于轨迹序列对齐的语义地图生成算法,并利用这个算法实现了一个多传感器融合的语义SLAM系统。主要研究内容包括:(1)针对传统SLAM中激光SLAM虽然定位精准却不容易获取环境语义信息,而视觉SLAM可以融合环境语义信息却又容易受环境因素影响算法精度的问题,本文提出了一种结合了两类SLAM算法的基于轨迹序列对齐的语义地图生成算法。该算法需在同一条运动轨迹中同时采集激光数据和RGB数据,然后分别借助Cartographer算法处理激光数据生成2D栅格地图以及ORB-SLAM算法构建物体的立方体语义地标,最后对齐这两部分生成的同一轨迹的两个不同位姿点序列,利用相似变换将语义地标映射到栅格地图中形成最终的语义地图。这里构建立方体语义地标是通过在ORB-SLAM算法中加入对关键帧进行目标检测的处理,并对相邻关键帧之间同一物体的2D检测框进行三角化投影逐步构建而成的。(2)为了改善SLAM系统开发过程中存在的多模块耦合且开发效率低下的问题,本文还提出了一个包含采集层、算法层、接口层和应用层的通用SLAM系统开发框架。然后根据提出的开发框架,利用基于Player平台的扫地机器人和相机传感器搭建了一个多传感器融合的硬件平台,并在这个硬件平台的基础上实现了一个完整的语义SLAM系统。该系统的采集层会借助扫地机器人获取激光雷达数据、IMU数据和里程计数据,同时借助相机传感器获取同轨迹下的RGB图像序列。算法层则主要实现基于轨迹对齐的语义地图生成算法,而接口层分为定位模块、地图模块、语义模块三个模块,分别由位姿设置、地图获取、语义地标生成等核心功能接口组成。整个系统各模块均会作为一个ROS节点,利用ROS的消息发布和订阅模式进行数据交互。为了验证本文提出的语义建图算法的可行性以及基于多传感器融合的语义SLAM系统的建图效果,本文先分别用公开数据集以及在实际场景中对立方体语义地标的生成模块以及栅格建图模块进行了实验和分析。实验结果表明,语义地标的生成模块能借助多视角下采集到的图像序列准确生成表示物体在三维空间中所处位置和大小的立方体框,而栅格建图模块能在小场景中完成栅格地图的构建和优化,并且在同时使用多种传感器数据时地图优化效果最优。最后在一个包含多个物体的室内场景中采集数据集,利用本文实现的语义SLAM系统完成了ORB-SLAM和Cartographer的轨迹对齐,并最终生成了该场景下融合多种传感器数据后的语义地图。
其他文献
产业集聚是工业化发展到一定阶段的必然产物,与经济增长之间有着重要的联系。产业集聚能够通过降低交易成本、促进知识溢出、增强企业竞争等途径促进经济增长。随着集聚水平的不断增加集聚所产生的负面效应不断显现,最终会呈现出对于经济的抑制作用。现阶段,我国经济发展进入新时期,经济下行压力增加,如何通过提振制造业来促进经济增长,对我国有着至关重要的意义。本文选取制造业产业的集聚特性,以全国260个地级及以上城市
随着深度学习和无人驾驶技术的发展,道路目标检测的应用越来越广泛。道路目标检测对实时性和准确性均有较高的要求,此外室外环境常常出现雾天等恶劣天气情况,极大的影响了目标检测算法的效果。研究雾天环境下的道路目标检测问题,提高现有目标检测算法准确率,对相关行业的发展有重要意义。本文以卷积神经网络为基础,对雾天道路目标检测算法进行了研究。本文以YOLOv3网络为基础,提出了融合深度可分离卷积和密集残差网络的
情感在青少年的品德发展过程中扮演着重要角色,是形成优秀品质的重要条件,因此情感互动在思想政治课堂教学过程显得格外重要。思想政治课堂教学过程既是一个掌握知识的过程,也是一个情感互动的过程,在这一过程中强调学生主观能动性的发挥;情感在高中思想政治课的地位越来越重要,这就要求思想政治课教师重视课堂中的情感互动,掌握情感互动的技巧。当前的基础教育把师生情感互动放在了重要位置,针对高中生这个接收群体的性格特
思维导图是一种高维度思考与图文并茂形式相结合的可视化笔记法,它以图解的形式和网状的结构储存、加工、优化和输出信息。高中思想政治教育课是一门集情感态度价值观、知识、能力于一体的德育类综合课程,对学生的人格、品德、心理的养成和价值观的培养等具有重要影响。新课标的制定充分说明,目前对思想政治课的要求比以往更高,不仅强调培养学生的情感态度价值观,更要提升学生的思维能力、学习效率,培养学生的发散性思维能力,
肺癌是发病率与死亡率增长最快的恶性肿瘤之一,对全人类的身体健康造成了重大影响。因此,肺部病变的早期诊断对肺癌的诊断与治疗有重要的意义。肺癌的早期形态是肺结节,临床使用计算机断层扫描技术检查肺结节病变。肺结节的影像特征具有多样性,人眼筛查不仅工作量大,而且观察者对特征的判断具有主观性。对肺结节的表现特征进行准确的定量分析,对医生判断结节是否会成长为恶性肿瘤具有很大作用。本文首先研究并总结了肺部公开数
道德与法治课是集道德修养、社会参与、法治知识为一体的综合性课程,它是学生在初中阶段接受道德教育与法制教育的主要途径。一堂高效的道德与法治课不仅仅是完成对相关知识的传递,更重要的是要求教师对课堂时间进行科学有效的管理,在有限的时空下达成对学生文化价值观念等方面的整体培育。深化道德与法治课课堂时间管理研究,对提升课堂教学效率、达成教学目标、提高学生课堂参与度等方面具有重要的价值和意义。道德与法治课课堂
移动智能设备数目大幅度增长,但移动智能终端具有CPU处理能力弱、电量低等局限性,难以支持计算密集型业务。为了提高移动用户的服务体验质量,同时缓解移动云计算造成的回传带宽消耗,雾计算是一个可行的解决方案,雾计算作为云计算的扩展,支持在网络边缘节点部署计算能力。网络功能虚拟化技术可以为雾计算环境提供更加高效、灵活和可扩展的网络功能服务,通过将网络功能从专用硬件设备迁移到通用服务器上,可以灵活地利用网络
随着人工智能与大数据的飞速发展,教计算机理解人类自然语言已经成为了最具挑战的AI完全目标。让机器学会像人类一样阅读文本,通过理解文本中的内在含义,能够根据问题和需求给予正确的响应和反馈,该任务过程被称为机器阅读理解任务。机器阅读理解作为自然语言处理任务中一个重要的研究领域,已经成为了学术界和工业界的关注热点。并且随着深度学习技术的兴起、不断推出的各种大型中英文数据集,机器阅读理解任务的难度和挑战性
我国从20世纪70年代开始进入城市化,在2017年末我国的城镇化率达到61.55%。随着城市化进程的发展,造成了许多社会和环境问题,例如:交通拥挤、就业紧张、城市热岛、水质恶化等问题。本研究以沈阳市主城区为研究对象,分析土地利用/覆被类型对地表温度和蒸散量的影响,为城市生态建设提供参考。主要研究成果如下:(1)将土地利用/覆被类型通过建立混淆矩阵进行精度评价,总体分类精度在90%左右,Kappa系
随着依法治国理念的不断深入,我国在新时代中国特色社会主义法治化建设的成效越来越成熟。建构核心素养体系逐渐成为顺应国际教育改革趋势的潮流,也成为增强核心竞争力和提高人才质量的关键环节之一。中学生法治培育纳入到国民教育体系当中,从国家建设的长远目标来看,对中学生进行法治意识培育承载着国家和民族的厚望。中学生道德素养的培养和法治意识的培育处于黄金阶段,处于初中阶段的学生正在面临着生理和心理的巨大变化,在