柑橘采摘机器人目标识别、定位与采摘研究

来源 :江苏大学 | 被引量 : 2次 | 上传用户:yy080408
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
针对果园环境下现有果实识别方法精度偏低、识别速度过慢,识别模型在边缘设备中识别效率较低等问题,本论文依托江苏省重点研发计划(现代农业)项目,以柑橘果实为研究对象,对果园环境下柑橘果实的识别、定位,采摘机械臂运动轨迹规划等进行研究,以提高农业自动化,信息化水平。本文的主要研究工作包括:(1)构建了柑橘果实的识别模型。以单阶段检测YOLOv4模型为柑橘果实识别的基础模型,基于SENet注意力模块改进特征提取网络,提高模型对有用特征的敏感度;设计CSPConv改进颈部网络结构,减少计算量的同时加强对底层特征的复用;基于Focal loss重构置信度损失函数,提高模型对难分辨样本的检测能力;最后采用BN层的γ系数作为通道稀疏因子,对模型进行剪枝,删除冗余参数,减小模型体积。在果园环境的柑橘数据集下进行试验,分析网络结构和Focal loss超参数对模型具体的影响。与YOLOv4相比,本文构建的YOLOv4-L识别模型的AP值提高了2.74%,F1得分为0.93,综合检测性能更优,识别速度提高了2.18倍,为53.8FPS,模型大小为15.85MB,适合在低内存设备部署。(2)构建了目标三维定位模型。推导果实像素点坐标与世界坐标的转换关系,对RGB-D相机的彩色相机进行标定获取坐标转换所需参数,并对深度误差分析,确定相机最佳定位区间。根据上述参数建立三维定位模型,通过试验测得在X轴平均误差为2.95mm,Y轴平均误差为3.45mm,Z轴平均误差为3.67mm。(3)部署识别模型与识别定位系统集成开发。为实现识别模型的应用,利用Tensor RT对识别模型加速推理,使模型部署在低算力的边缘设备中,达到更高的识别效率。以Jetson nano为试验平台,进行识别模型部署试验分析,经过加速推理后的模型识别速度提高了2.75倍,是YOLOv4的12.2倍。利用Py Qt5集成识别与定位系统,通过可视化界面操作完成柑橘的识别定位,并实现定位数据解析与保存等功能。(4)采摘机械臂运动学分析与运动轨迹规划。采用D-H法建立采摘机械臂的运动学模型,进行正、逆运动学分析。在运动学推导的基础上进行关节空间的机械臂运动轨迹规划研究,针对多项式插值规划的轨迹运动不稳定,需要过多约束参数等问题,推导五次B样条曲线轨迹规划。仿真结果表明,本文推导的五次B样条曲线规划出的曲线更平滑,且所需运动约束参数更少。本研究为柑橘采摘机器人提供了可靠的视觉识别定位系统和机械臂采摘运动轨迹规划理论基础。
其他文献
水稻真菌病害是世界性农业问题,全球每年因水稻病害造成的损失约占总产量的11%~30%。经研究发现水稻病害主要由空气中真菌孢子侵染引起。因此,应选用孢子捕捉检测设备实现对气传孢子在流通过程中进行检测。但气传孢子检测存在以下难点:(1)稻田空气中微生物成分复杂孢子浓度较低,且随空气进行无规则运动,造成真菌孢子难以检测;(2)气传孢子检测设备较大,不够便携,不能实现在线检测。因此,课题提出一种基于微流控
学位
为保证高效可靠的电力传输和分配,实时监测例如电流及电能质量信息等关键电网参数,智能电网对于信号分析与测量传感技术的需求日益增高,其中电流信息的分析与采集方法研究是构建电流测量系统的重要基础。针对目前电流分析系统无法较好地提取采集信号关键信息的难题,以及传统电流测量装置存在的缺陷,本文提出了基于改进HHT算法的电流分析方法及基于AMR传感器的电流测量方法,构建了电流的分析测量系统,实现了电流的智能分
学位
表面润湿在自然界中很普遍,各种生物表面通过进化和物种选择逐渐产生对自身有益的润湿性质。受生物表面润湿性质的启发,这些类生物表面的人工功能性润湿表面已经被开发出来,例如各向异性润湿表面和超疏水表面等。目前,各向异性润湿表面和超疏水表面已经可以通过多种加工方法在多种材料上实现,但是各向异性润湿的超疏水表面的制备大多使用有机材料作为基底,而对同时具备各向异性润湿和超疏水特性的金属表面的制备研究相对较少。
学位
球墨铸铁凭借着优异的性能被广泛应用于机械、汽车等行业。随着技术的发展,车用铸铁件越来越多地使用高牌号球墨铸铁,而传统的铸造方式所得到的球墨铸铁的性能越来越难以满足要求。近年来高性能球墨铸铁件的经济化生产开发,已逐渐成为研究热点。通常砂型铸造条件下,要达到QT800-2标准的珠光体球墨铸铁,需要进行铸件的热处理。这不仅增加了生产成本,加长了生产周期,且需要消耗大量的能源。本研究的目的是通过提前高温打
学位
与传统外延生长、晶格匹配的块体半导体光电子材料相比,溶液合成的无机量子点具有低成本、高灵活性、易集成等优点,以及优异的光吸收和尺寸相关的光电特性使其被广泛应用于各种光电子器件中,但通常低于传统材料的光电性能仍限制其进一步发展。随着研究的进一步深入,人们的关注点更多地放在了量子点异质结界面上,此界面可以通过操纵能带弯曲和内置电场来促进电荷分离,进而增强其光电性能。因此,选择合适的量子点来组成异质结构
学位
钢铁材料由于其优异的性能在海洋领域、航天领域和化工领域都起到不可替代的作用,然而当处于具有腐蚀和磨损工况下,易受到腐蚀和磨损单独或交互作用下而失效。作为单层原子厚度的二维材料石墨烯,具有不渗透性、高导电性和优异的物理化学稳定性,使石墨烯作为润滑添加剂和超薄防护涂层表现出巨大的潜力,但目前石墨烯保护基底防止磨损和腐蚀的研究远远不足,在制备工艺上也存在着诸多问题。因此,如何在金属材料上快速制备石墨烯化
学位
热交换钢管作为余热锅炉的热交换通道,其作用是吸收高温烟气的热量,提高燃料燃烧释放的热量的利用率。但是由于长期处于冷热交替的环境,管内介质温度高,压力大,且接触的烟气往往也具有腐蚀性,使得热交换管容易产生壁厚减薄、裂纹以及腐蚀孔等缺陷,影响设备安全运行,甚至发生爆裂,造成财产损失和人身伤害。因此,对余热锅炉的热交换管进行定期检测,及时发现热交换管中的存在的缺陷是设备安全运行的重要保障。由于热交换锅炉
学位
高铁动车组定期与不定期检修,对动车组的安全运行具有重要意义,也是一项系统性强、科技含量高、规范要求严的技术工作。车辆电机、车轴、齿轮箱、齿轮、车轮构架、制动盘等部件,在检修过程中需要进行油污、锈蚀、油漆等的污物去除。传统的脱漆方式多为物理清洗法或化学清洗法,容易损伤基材、人工效率低、环境污染严重、危害身体健康、成本高、不适合局部清洗等。随着环保理念和法规的推行,亟需开发一种新型、高效、清洁、稳定、
学位
近些年,我国经济实力和社会生产力水平显著跃升,人民的生活质量大幅提升,同时伴随而来的空气污染问题也愈发严重。气体传感器是用于捕获环境中有关气体分子的信息并将其转换为可供采集的电信号的器件,在日常生活、医疗诊断、环保监测和工业安全等领域中都有广泛的应用。随着气体传感器的应用不断向更智能和更高端的领域进军,这就要求传感器的性能更加优异、技术更加先进。为实现这些目标,高性能敏感材料的研发是至关重要的,其
学位
聚合物材料的结晶行为是高分子物理研究领域的一项重要课题。结晶性和半结晶聚合物材料因存在晶体结构而具有优异的机械性能,因此可以通过控制聚合物的结晶行为来改善材料性能。聚合物的拓扑结构对材料的结晶行为有很大影响,例如环形聚合物没有链末端,这会导致其结晶行为与其线形类似物存在显著差异。此外,拉伸和将聚合物接枝在碳纳米填料上也是调控聚合物结晶行为的有效途径。在工业生产过程中,为了获得理想的聚合物材料,往往
学位