基于立体视觉的移动机器人仓库场景三维重建

来源 :华南农业大学 | 被引量 : 0次 | 上传用户:FlyingBird173
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
我国是一个农业大国,农业是国民经济发展的基础,也是国民经济发展的命脉。在传统的农资仓储物流行业中,作业环境恶劣,劳动强度大,特别是在一些保存化肥、农药的仓库,工人在工作时需要准备大量的防护措施。为降低企业运行成本,提高劳动效率,急需一些智能设备来减轻甚至取代工人。运行在农资仓储物流行业的机器人运行场景的复杂性和多变性远远超过结构化环境。想要在这些复杂环境下让农业机器人实现自主移动、精准作业的同时保证作业效率和安全性,需要农业机器人具备较强的环境感知能力和应急能力。本文主要研究内容是在智能叉车平台上进行基于激光定位与立体视觉融合的三维地图构建,通过重构智能叉车工作环境,为智能叉车在仓储环境运行时的路径规划和避障提供基础环境信息。主要研究和工作内容如下:根据试验场景确定双目相机型号和激光传感器型号,在智能叉车平台上搭建三维重建系统。首先研究相机的成像原理和成像模型,分析相机产生畸变的原因。相机成像模型分为线性成像模型、非线性成像模型,深入探究立体视觉成像模型,推导求解像素三维坐标的公式;标定是视觉重建系统的首要环节,相机标定结果对后续三维重建精度有着直接影响。本文介绍了两种常用的相机标定算法和分析其标定原理,选择更为简单准确的张正友棋盘格标定法对相机标定,获得相机的内参和外参,用标定的相机内外参数对图像去畸变处理和双目校正,为本文后续工作展开奠定基础。研究图像特征点提取算法,对比几种特征点提取算法优缺点,选取特征点提取速度最快的FAST算法提取特征点;分析基于图像区域相关匹配和基于图像特征点匹配的立体匹配算法,结合两种立体匹配算法的优势,提出一种改进的立体匹配算法:基于图像特征点区域相关的立体匹配算法。该算法的主要原理如下:采用FAST算法在左目图像提取图像特征点,计算特征点在右目图像中的匹配点。并对计算方法进行了加速:采用SSD算法快速计算得到特征点的候选匹配点,再采用NCC算法从候选匹配点中精确计算得到特征点的最佳匹配点,改进的立体匹配算法不仅提高了立体匹配的精度,还提高了立体匹配的效率。在智能叉车平台上进行数据采集工作,将激光传感器采集的定位信息转化为可直接用于计算的相机外参矩阵,采用本研究提出的改进的特征点提取和改进的立体匹配算法对图像进行处理,最后,将相机外参矩阵与图像特征点数据融合,计算得到特征点世界坐标系坐标,将其投影在同一个世界坐标系下,完成仓库的点云三维重建,由于三维点云地图不适用于导航,将其转化仓库为八叉树地图,为叉车路径规划和导航奠定基础。
其他文献
在智能机器人领域中,实时避障是实现高端智能机器人的核心技术之一。割草机器人实时避障主要研究局部路径规划和路径跟踪,采用人工势场法(Artificial Potential Field,APF)进行路径规划,并结合模型预测控制(Model Predictive Control,MPC)进行路径跟踪控制。路径规划和跟踪技术的研究对机器人领域的发展成熟发挥着至关重要的作用,无论是在理论研究还是工程应用中
学位
甘蔗是我国主要的糖料作物,甘蔗在进入拔节伸长期进行大培土时甘蔗生长高度达到0.8-1 m并且生长很快,要求中耕机的通过高度达到1.5 m以上,以减少机具对甘蔗的折断。为了适应不同地块甘蔗种植行距的变化,中耕机的轮距应能调整。团队前期研制的菱形4轮中耕机在结构以及功能设计方面已基本满足上述需求,但是样机质量过大,是否可以适应丘陵山地的作业环境,还没有进行研究。本文在车架结构设计的基础上,结合样机试验
学位
甘蔗是我国最主要的蔗糖原料,种植面积位于世界第三。我国的甘蔗收获以人力为主,劳动生产率低,2017-2018榨季机械化率仅为1.4%,对甘蔗收割机械的需要极为迫切。广西、云南是我国两个甘蔗最大产地,蔗地以丘陵山地为主,现有甘蔗收割机在使用中存在侧翻风险,亟需开展甘蔗收割机在丘陵地区的作业稳定性研究。本文以本团队研发的四履带式甘蔗收割机(以下简称四履带式)与两履带式甘蔗收割机(以下简称两履带式)为研
学位
我国是甘蔗种植大国,但是甘蔗的收获效率极低。目前,甘蔗机械化收获以切段式为主,切段式收割机收获过程输出大量的蔗段,需要配套的田间运输车收集蔗段。现有的轮式田间运输车重心高、泥泞路面易打滑,丘陵山地行驶稳定性差。本文以团队研制的适用于丘陵山地的甘蔗田间运输车为研究对象,采用理论分析、仿真分析和田间试验的方法对其行驶性能和卸料性能进行研究。主要研究内容及结论如下:(1)运输车的主要结构分析。对底盘的结
学位
从20世纪末开始,全球范围内的能源短缺和环境污染问题日益突出。2018年,我国国务院发布《蓝天保卫战三年行动计划》,将减少机动车排放污染作为落实节能减排工作的重点内容。研究表明,汽车的质量每下降10%,汽车的油耗就能降低6%~8%,挂车作为我国公路运输的主力军,至2019年全国保有量为2431万辆,所以挂车的轻量化研究对节能减排意义重大。本文研究内容来源于与某挂车车桥总成制造公司的产学研合作课题,
学位
本课题基于广东省省级科技计划项目“山地果园运输平台智能快速预冷保鲜集成系统研究(2017A020208045)”,旨在结合柑橘保鲜规律,利用图像处理与神经网络技术,构建柑橘保鲜品质检测系统,实现柑橘在物流过程中,快速、低成本的品质检测。本课题的主要工作及成果如下。柑橘图像颜色特征提取与神经网络品质映射信息系统开发方面,本课题研究了B分量下固定阈值分割方法,该方法为有效的通过颜色分割柑橘与背景的图像
学位
变速箱作为车辆的最精密部件之一,其箱体性能的优劣对车辆的传动性和整机性有重要的影响,也是衡量工程机械动力性、经济型及驾驶性的关键。拖拉机在田间作业过程中传递功率大,作业环境恶劣,外界负荷波动频繁,因此其行驶系统需要承受较为复杂的动载荷。外部施加的激励可以通过弹簧减震器的衰减作用达到一定程度的缓解,但车辆内部即变速箱内仍存在激励源,导致车身仍存在较大幅度的振动,增加了底盘系统上零部件的损耗,因此变速
学位
随着互联网的普及,电子商务逐渐扩展到了农村,使得农产品交易突破了时间和空间的限制,为农村经济增长注入了新活力。如今,运用电子商务的手段提升农产品的流通效率已经成为了当前农村工作的重点之一,农产品电子商务的发展进入了鼎盛时期。但是在农产品电子商务发展过程中,一些地区存在资源利用效率低下、产出效果不明显以及产业规模与资源现状不匹配等问题。如何提高农产品电子商务的投入产出效率,充分发挥所拥有的资源效力已
学位
我国龙眼产业的自动化发展落后,基础设施不足,过分依赖低端劳动力,缺乏机械化的生产规模体系。龙眼生产中的众多不足之处导致收益开始下滑,市场利润被日益挤压。机器视觉从创立和诞生以来,迅速发展成为一个热门的研究领域随着机器视觉技术的发展成熟,越来越多的研究将其应用于农业。但目前为止,以龙眼为对象的相关机器视觉研究存在许多空白。机器视觉结合到龙眼种植产业中,能够改进龙眼的生产环境,提高生产效率,不仅提高果
学位
计算机视觉系统在各种工农业场景中已得到广泛应用,如流水线上的工农业产品检测、厂房视频监控、农产品产量估计等。然而,阴影是自然环境中广泛存在的一种自然现象,会给计算机视觉相关任务造成干扰,如流水线上的工农业产品阴影扩大了对识别工农业产品有效面积的影响;自然环境下果实识别中阴影对识别出来的果实有效面积的影响,从而影响目标水果识别和轮廓提取的准确度,导致了对果实的错误的定位;农产品产量估计中的阴影造成估
学位