语义视觉SLAM系统硬件加速平台的研究

来源 :北京交通大学 | 被引量 : 0次 | 上传用户:tangtieming1983
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
语义视觉SLAM(Simultaneous Localization and Mapping,同时定位和建图)对于智能移动机器人实现自然交互和特定任务具有重要意义。目前,语义视觉SLAM的研究主要集中在算法层次用深度学习方法替换部分功能模块,缺乏对系统硬件实现和实际应用的考虑。同时深度学习技术的引入需要GPU(Graphics Processing Unit,图形处理器)进行数据处理,这会给系统造成功耗高、体积大等问题。因此,需要更高效的计算架构和硬件平台来提高整体处理能效。考虑到FPGA(Field Programmable Gate Array,现场可编程逻辑门阵列)移植性强、高度并行等特点,论文提出基于以FPGA为计算核心的HERO平台(Heterogeneous Extensible Robot Open Platform,异构可扩展机器人平台)实现语义视觉SLAM系统的设计方案。该方案以典型语义视觉SLAM系统——DSSLAM(Semantic Visual SLAM towards Dynamic Environment,面向动态环境的语义视觉SLAM)为例,从语义分割网络的优化加速、系统集成、机器人部署进行相关研究,主要工作和创新点如下:(1)根据室内应用场景和FPGA硬件实现的需求,对DS-SLAM系统中语义分割线程的Seg Net网络进行优化。针对不同物体类别对Seg Net网络进行训练,得到适合系统的网络模型;通过批量归一化层和卷积层的合并,减少了前项推理的计算量;利用8bits线性量化的方法有效减少了网络参数量,GA(Global Accuracy,全局精度)、CA(Class Accuracy,类精度)、MIo U(Mean Intersection over Union,平均交并比)分别仅降低了0.817%、1.102%、1.56%。(2)在已有的语义分割网络硬件加速架构基础上,完成DS-SLAM系统中Seg Net网络的硬件实现。通过对并行化处理、流水线结构、内核执行和数据访存等方面的研究,提高系统的处理速度。在FPGA开发平台上实现了相较于传统CPU平台41倍能效的提升。(3)基于HERO平台设计了DS-SLAM系统集成方案,实现移动机器人Turtlebot2的部署和语义八叉树地图的创建。在数据集和实验室楼道场景的实验表明,该方案在保证DS-SLAM系统定位精度的基础上,能效方面相对于传统计算架构提高了50%。通过本文对语义视觉SLAM系统硬件加速技术的研究,系统摆脱了对高功耗计算平台的依赖,为移动机器人的定位和建图提供了高能效的解决方案。
其他文献
当前各种视频业务、云计算以及数据中心等大流量业务的出现,对承载通信业务的光网络性能提出了更高的要求。传统的基于WDM的光网络采用固定波长间隔,无法灵活地为小带宽业务分配合适的波长资源。同时为了防止相邻波长之间相互干扰,WDM光网络需要在波长之间设置保护带宽,进一步加剧了WDM光网络中的频谱资源浪费。为解决上述WDM光网络的问题,提升光网络资源利用率,研究人员提出了弹性光网络的概念,将WDM光网络的
裂缝是混凝土桥梁主要病害之一,桥梁裂缝的检测是评估桥梁是否可以安全服役的重要环节,利用人工检测和桥检车检测的方法存在效率低、影响道路交通等弊端。随着计算机的快速发展,图像处理技术应用越来越广泛。本文对桥梁裂缝检测方法进行了深入研究,并针对桥梁裂缝特点,确定了基于图像处理的桥梁裂缝识别方法,并得到了有效验证。论文主要完成了以下几方面工作:首先,研究了图像处理的测量原理并建立了镜头畸变模型,实现了相机
随着我国公路、铁路交通事业的不断发展,工程建设地域和规模的不断扩大,越来越多介于土和岩石之间的过渡性的岩土体成为隧道施工设计中难以避免的重点和难点。该地层岩土体往往胶结性较差,含水量高,对于工程施工过程的开挖扰动较为敏感,表现出明显的应变软化现象,隧道开挖扰动以后强度迅速降低,施工中极易发生塌方,大变形等灾害,对工程设计和施工开挖造成诸多难以解决的问题。本文依托蒙华铁路中条山隧道,对第三系弱胶结砾
信息技术在教学实践中的广泛应用推动了教育理念和教育模式的创新。其中,虚拟仿真教学适应了信息时代开放教育、资源共享的变革要求,能够帮助学习者有效开展探究性学习、实践性学习,为人才培养质量的提高提供了新的动力。目前,虚拟仿真教学在实际应用中面临的最大挑战是难以实现学习者“知”与“行”的统一:虽然现有平台能够提供丰富的实践情境,但大多无法确保学习者在进行仿真实践的同时,有效完成教学目标中相应知识的掌握,
在输油管道运行过程中,微小泄漏由于不易发现且易发展为大的泄漏而经常引起严重事故,造成巨大的损失。输油管道自建成至今,国内外众多学者对管道的泄漏检测提出了各种理论和方法,其中内检测技术由于精度较高被广泛使用,对于小口径的输油管道来说,由于其直径的限制,传统的管道内检测器容易在管道内卡堵,因此本研究提出球形外观的内检测器,能够在管道内顺利通过不发生卡堵,同时,内检测器还可采集泄漏孔处的近声场声信号,能
西阎镇位于山西省临汾市翼城县、晋南和晋东南地区交界处,镇域范围内九个行政村中有八个是传统村落,是一个区域文化融合、民居特征鲜明的典型区域。这些传统民居在城市化进程中岌岌可危,但目前尚没有针对该区域的相关学术研究。本文通过文献研究、田野调查、口述访谈等研究方法,摸清西阎镇传统民居的基本现状,探究其建筑形制、结构特征,分析其影响因素,进一步研究环境如何影响民居,民居和生活又如何互相影响,总结出西阎镇传
地铁是现代城市交通的重要组成部分,盾构地铁隧道由于各种原因会出现裂缝和渗漏水等表面病害,有效地检测隧道表面病害对于地铁运营安全至关重要。随着我国地铁运营里程的迅速增长,传统的人工目视巡检等方式已经难以满足检测需求,急需一种高效率、智能化的检测方式,能够实现地铁隧道定期巡检和病害标记的功能。基于此,本文提出了一种基于机器视觉和图像处理技术的隧道表面图像采集系统和病害智能识别算法。论文首先设计了隧道表
移动互联网,云计算和物联网的突破性发展正在敦促全球研究人员寻找新型的复用技术来应对通信容量的瓶颈问题。由此研究人员引入了空间这一维度,其中基于少模光纤的模分复用技术是目前提升传输容量的较为有效的技术手段之一。而将模分复用技术与成熟的波分复用技术相结合形成的模分-波分混合复用光通信系统将会更大程度地提升通信容量,为进一步扩展光通信系统的信道容量指明了前进方向。在这种先进的模分-波分混合复用系统中的最
隧道中列车内部受限空间与列车外部受限空间形成了嵌套型受限空间。嵌套型受限空间中稳定的无线电波覆盖是列车控制系统安全运行以及公众移动通信系统稳定可靠的重要保障。我国中西部地区地形复杂、多隧道,为了提升这类环境中的无线通信系统性能,实现嵌套型受限空间高效电磁波覆盖尤为关键。然而,嵌套型受限空间中电磁环境复杂以及物理结构多样,要进行精确的电波覆盖预估需要精确模拟嵌套型受限空间结构。本文采用FDTD方法计
街道是具有交通功能与交往功能的重要城市公共空间,特别是对于高校周边的街道来说,街道承载了高校师生及周边居民的城市生活。但是随着北京城市的不断更新与发展,城市规划往往重视街道快速交通,以街道的机动车交通属性来衡量一条街道的好坏,而忽略掉了其作为交往空间的功能作用,导致城市慢行系统发展严重滞后。北京高校数量众多,慢行系统的滞后导致高校周边众多街道的功能无法满足附近师生与居民的生活需求,也无法为他们提供