基于深度学习的番茄植株多目标识别方法研究

来源 :太原理工大学 | 被引量 : 0次 | 上传用户:jizhidong2009
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着我国经济快速的发展和科学技术的进步,农业生产作业从农业机械化生产正在逐步过渡到农业智能化生产,其中农业装备智能化机器人是智慧农业生产过程中最重要的一环。番茄作为农业作物,在我国具有极大的栽培面积和消费市场,其中温室番茄种植由于其种植条件可控,成为农业智能化机器人研究对象。利用深度学习计算机视觉算法,通过大数据训练可准确的识别出预设的目标,实现端到端的检测。本文研究基于深度学习的温室番茄植株多目标识别方法,解决农业智能化机器人作业过程中的视觉系统对于番茄果实和茎秆等对象的多目标信息的感知和获取技术,从而实现温室番茄果实识别部署系统。本文主要的研究内容和工作有:(1)分析了基于深度学习番茄果实的多目标识别算法,选用YOLOv3目标检测算法进行研究并针对其算法的损失函数进行了改进,训练后的最优模型应用于温室番茄果实的多目标识别。首先,针对传统YOLOv3算法的损失函数利用基于广义交并比(GIOU)的位置损失函数进行改进;其次,在温室番茄种植工况条件采集番茄红绿果实图像,并通过图像扩增等一系列图像预处理,通过标注整理得到单张图像大小不超过416×416像素以及数据量为4000张的番茄果实图像数据集,利用K-means聚类算法获得9个不同规格的先验框对训练文件进行配置。最后通过模型训练得到最优模型,其平均精度均值mAP为95.7%,具备实时性,单幅图像处理耗时15ms。检测结果可以为智能化番茄收获机器人对于果实视觉定位提供技术基础。(2)分析了基于深度学习番茄茎秆的多目标识别方法,选用了Mask-RCNN目标分割算法进行研究,并将其对茎秆的识别其应用于番茄整枝作业中作业点的获取。首先,基于Mask-RCNN目标分割算法针对番茄茎秆多目标识别进行深度模型训练。在番茄温室种植条件下,采集的番茄茎秆图像,通过图像扩增等一系列图像预处理手段,通过标注整理得到单张图像大小不超过800×800像素以及数据量为3000张的番茄茎秆图像数据集,利用目标分割算法Mask-RCNN进行对番茄茎秆数据集进行深度模型训练,得到最优模型,其对象边界框和分割的平均精度均值mAP值分别为89%和68%。其次,对茎秆推理识别图像的基础上,进行二值化处理,对轮廓利用图像处理进行拟合直线。最后,通过拟合直线交点设计方法获得整枝作业点,为智能化番茄整枝机器人现实中茎秆作业点提供技术基础。(3)设计规划了温室番茄果实识别部署系统。在上述工作的基础上,提出部署系统设计需求,针对需求进行可行性分析。其次,基于软硬件条件,设计系统总体框架结构。最后,分别设计结构中的单独模块,基于改进的YOLOv3番茄果实检测最优模型,开发图形界面,实现了番茄果实图像实时检测和番茄实时视频检测。该部署系统进一步促进了农业智能化设备的普及与应用。
其他文献
伴随着科学技术的发展进步以及对交通运输需要的持续增加,大型桥梁在社会现代化中的作用也越来越突出。为了监测自然环境改变(如地震、地陷)或人为因素对桥梁各部分结构的影响,亟需提升桥梁健康监测及评估系统的实时性、整体性、准确性。因此对桥梁健康状态进行监测和评估具有重要意义。基于此,本文设计了一种多模式多节点桥梁健康监测及评估系统,并主要完成以下工作:(1)根据监测目标和内容,分析传感器的使用条件、安装方
在智慧矿山的建设进程中,对综采工作面进行监测有着至关重要的作用。综采工作面虚拟监测系统作为远程监测探索研究的一项重要内容,能够实现对综采工作面设备及环境的全局实时监测,但目前的研究更重视技术的突破和功能的叠加,而忽略对人机交互的探索,致使系统的识别效率低,易用性和易学性差,甚至存在功能残缺、容错性低的问题,从而导致系统用户体验不佳。本文通过交互设计的理论和方法对虚拟监测系统的交互逻辑和界面视觉进行
随着信息时代的到来,在人机交互中产生了大量的文本,音频,图像等非结构或半结构等形式存储的数据。其中文本数据居多,为了有效的提取文本中有价值的信息供人们使用,实体识别和关系抽取技术是自然语言处理领域的两项基本任务,旨在帮助人们挖掘出文本中具有实体意义的名称及其之间存在的关系,这对构建领域知识图谱,智能问答系统等具有重要的意义及价值。传统的关系抽取任务将实体识别和关系抽取分成两个独立的子任务,没有考虑
随着智能机器人技术的蓬勃发展,复杂场景下的定位与建图对传感器的要求也越来越高。根据不同传感器的特性,在应对不同场景时可以选择相应的传感器:单纯采用视觉传感器对场景的纹理特征以及运动速度有一定的限制,但是视觉传感器可以提供丰富的场景信息。双目立体相机既可以解决单目相机没有尺度的问题,又可以避免RGBD相机在室外被光照干扰的问题。GPS(Global Position System)可以实时获取自身的
物联网(Internet of Things,Io T)作为推动信息技术发展,加快产业更新的关键性技术,它通过无处不在的传感器节点,将人与物,物与物有机的关联起来,物品之间通过射频识别(Radio Frequency Identification,RFID)技术的桥梁实现自动识别。随着共享经济和物流快递行业的迅猛发展,碎片化的海量订单推动着仓储管理行业向自动化,智慧化发展。大型智慧仓储不仅要录入商
在女性患癌人群当中,乳腺癌是最常见的癌症,是威胁女性生命健康的重要因素之一。有研究表明,乳腺癌的早期发现可以有效提高患者的治愈率,并且患者的五年生存率也会大大提高。因此乳腺癌的早期筛查对于患者后续的治疗有着重要的意义。医学影像是乳腺癌早期筛查的重要手段,其中乳腺钼靶图像具有成像清晰、成本低以及灵敏度高的优点,是最常用的筛查手段。医生通常需要依靠大量的临床经验来做出诊断,但对于钙化病灶而言,由于其较
随着深度学习技术在计算机视觉方面的发展,常见的视觉识别任务,例如图像分类,目标检测和语义分割等迅速达到成熟。实例分割作为一种重要的图像理解方法,旨在找到图像中所有实例并且对实例进行像素级分类,兼具目标检测和语义分割的功能。尽管如此,实例分割仍然不足以对复杂的周围环境进行全面理解,例如当物体之间存在相互遮挡关系时,实例分割技术仅仅能够识别和分割可见像素部分,对于物体被遮挡部分无法做出预测。然而,人类
随着周围神经组织工程学的发展,可生物降解材料的研究具有广阔的应用前景。壳聚糖(Cs)由于其与糖胺聚糖相似的化学结构而成为神经组织工程的候选者,但由于缺乏弹性和柔韧性,经常需要与其他材料组合使用。许多天然材料也可以用于构建神经支架,例如透明质酸(HA),明胶(Gel)和胶原蛋白(Col)。通常,这些材料不适用于单独制备神经支架,因为它们很难成型,并且它们的水溶性决定了它们长时间不能在组织环境中保持单
近年来,随着人工智能技术的发展,越来越多人开始关注智能阅卷方面的研究。现阶段的自动评分系统对于客观题如判断题、选择题以及填空题等固定答案的题型能够做出精准的评分,但对于主观题来说,目前主要是以人工评阅为主,并且在评阅主观题试卷时,可能会受到个人情绪、卷面排版以及身体劳累的影响评阅试卷的客观性和工作效率,因此主观题评分系统的研究对于智能化教育具有重要意义。本文提出基于中文分词和文本相似度的主观题评分
随着科技的发展,智能设备给日常的工作和生活带来了巨大改变,语音发布命令指挥机器成为更快捷更方便的沟通方式。语音作为人与人之间,以及人与智能设备之间普遍使用的信息交流方式,是一种不可替代且极其方便的媒介。然而,在日常生活、语音识别、军事通信中,总是存在各种各样的背景噪声,严重干扰正常的生活以及通信,影响听众接收到的语音内容。语音增强的主要目的是减弱和抑制背景噪声对目标语音的干扰,使听众可以享受到高质