基于深度相机的苹果采摘机器人的目标检测和路径规划算法研究

来源 :江苏大学 | 被引量 : 3次 | 上传用户:taodengjiang
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在我国的农业生产中,果蔬采摘一直是果蔬产业的重要组成部分,而由于农业生产技术水平的落后,采摘工作需要耗费大量的人力物力,增加了农业生产的成本,制约了农业现代化的发展。因此,应加快对采摘机器人的研究,提高采摘机器人的采摘效率,推动农业的转型升级,实现高度自动化和精确化的农业发展目标。本文在国家自然科学基金项目(31571571)“基于快速视觉伺服控制的多照度环境苹果高效机器采摘方法研究”的资助下,主要对苹果采摘机器人的目标检测和路径规划算法进行了研究,主要完成的工作有:1、苹果采摘机器人视觉伺服系统的设计。根据实验课题的目标与要求,设计了苹果采摘机器人的视觉平台,并完成了硬件结构的搭建和软件环境的选择。2、苹果识别算法的研究。要想提高苹果采摘机器人的采摘效率,首先需要在图像中快速且准确地识别出苹果。本文选用了卷积神经网络模型SSD作为基础的网络架构,从默认框设计,匹配原则和损失函数详细介绍了该网络框架的基本原理和构造,并且从默认框和基础网络层两方面对基础的SSD网络框架进行了改进。对于改进后的SSD网络框架,采用了苹果数据集进行训练和测试,并且选择了表现最为优越的模型参数。最终改进的SSD网络框架能够准确且快速地在图像中识别出多个目标果实,得到其二维位置坐标。3、深度信息的获取。本文首先比较了三种不同原理的深度摄像头:结构光,双目视觉和TOF飞行时间法。综合本次课题要求和技术参数,选择了TOF相机作为采集深度信息的设备。其次结合之前获得的苹果二维位置坐标确定了苹果的深度位置,然后利用深度图上的信息确定苹果的周围区域是否存在障碍物,并且结合三维重构图和强度图上的特征信息来区分障碍物的种类。最终获得了目标果实及其周围不同种类障碍物的三维位置坐标,为路径规划的环境建模提供了完整的信息。4、采摘路径规划算法的研究。本文首先介绍了搜索理论基础和环境建模方法,其次结合上文获得的位置信息和栅格法将三维空间的采摘规划转化为在二维平面上路径规划的研究,获得了存在多个目标果实和不同种类障碍物的二维采摘地图,然后研究了标准A*算法的基本原理和主要步骤,并且针对标准A*算法存在的规划时间较慢,搜索节点过多等问题,分别从启发函数,列表的数据结构和移动代价值三个方面进行改进,以此使得改进的A*算法加快了规划路径的速度,减少了路径的长度并且更加适合实际的采摘环境。最后利用苹果和障碍物的三维位置信息将在二维采摘地图上规划的采摘路径扩展成实际采摘空间的三维路径点,为接下来的采摘实验提供准确的路径信息。5、采摘实验结果与分析。本文主要从采摘实验中的果实识别时间、路径规划时间、采摘路径长度和采摘总时间,来验证算法的有效性和实时性。通过采摘实验结果表明:改进的SSD模型不仅在识别速度上比基础模型提高了29.5%,而且也保证了较好的识别准确率和稳定性。而改进的A*算法在采摘总路径上比基础的算法提高了26%,在规划时间方面也提高了40%,从而保证了采摘总时间的缩短,提高了采摘机器人的采摘效率。最终实验结果可得改进后的算法抓取一个苹果的时间在11.4s左右,比改进之前提高了30.06%,满足了苹果采摘机器人的采摘要求。
其他文献
第一部分目的:联合开展行液基薄层细胞(TCT)和阴道镜下组织病理学检查及TCT检查异常再行阴道镜下组织病理学检查对宫颈病变的临床意义。方法:按照既定的纳入标准和排除标准,
社会主义核心价值观对指导性案例的形成具有指引作用。指导性案例中对核心价值观之具体内容的直接引用或间接体现,对案例形成前期的司法个案裁判具有指导意义。核心价值观参
试材为芍药‘莲台'品种(Paeonia lactiflora'Liantai'),采自山东荷泽,在花蕾萼片疏松、外层花瓣显现真正花色时采样,用水洗去叶片和花蕾上的分泌物,采后40 h火车
研究了用含0~240 mg/L钙元素的Amon and Hoagland培养液浇灌保护地栽培条件下的牡丹植株的光合作用特性,叶片的饱和光强为750 μmol·m-2·s-1左右,光补偿点为50μmol
目的探讨阴道镜在宫颈上皮内瘤变与宫颈癌诊断中的临床价值。方法方便选择2014年4月—2016年4月该院收治的580例患者作为研究对象,对其进行阴道镜检查诊断,并将其检查结果与
数字绘画作为传统绘画艺术的一个分支,对计算机技术有着很强的依赖性,并且表现出明显优于传统绘画的特点,但又有着对传统绘画的继承性,特征十分鲜明,创作方面则需要绘画基础
改革开放以来,大兴县天宫院村学支部在抓经济建设的同时,狠抓精神文明建设,大力兴办文化事业,先后建起了图书室、秧歌队、武术队、小剧团,通过开展丰富多彩、健康向上的文化
要想正确解答高考阅读题,除了需要认真、仔细地解读阅读文本的内容,准确理解文本的思想感情、艺术特色之外,还需要考生能够巧妙地利用文本内容之外的其他隐藏信息。比如:文章的标
西夏作为11-13世纪雄踞西北的独立政权,其地位却未能与同时期的辽、宋、金等同,西夏统治者也一直被视为属国藩王。实际上,辽、金曾承认过西夏的皇帝称号,但因其政权很快灭亡
本文以金黄色葡萄球菌和副溶血性弧菌为研究对象,采用微孔板检测法,分别以OD630值与生物被膜清除率反映两种菌的生物被膜生成量及不同培养时间添加不同浓度亚硝酸钠对两种菌