【摘 要】
:
智能农业车辆作为精准农业的重要载体,在现代农业生产的各种场合已经得到广泛应用。行为决策是智能农业车辆研究中的重点内容,传统的基于规则的行为决策算法在面对复杂多变的农业生产环境适应性较差,计算机科学和人工智能技术的发展为这一问题的解决带来了曙光。本文根据智能农业车辆的行为决策机制,提出了一种基于深度强化学习的行为决策算法,经过训练的算法能够依靠较少的传感器在不同的场景下实现智能农业车辆的“端到端”行
论文部分内容阅读
智能农业车辆作为精准农业的重要载体,在现代农业生产的各种场合已经得到广泛应用。行为决策是智能农业车辆研究中的重点内容,传统的基于规则的行为决策算法在面对复杂多变的农业生产环境适应性较差,计算机科学和人工智能技术的发展为这一问题的解决带来了曙光。本文根据智能农业车辆的行为决策机制,提出了一种基于深度强化学习的行为决策算法,经过训练的算法能够依靠较少的传感器在不同的场景下实现智能农业车辆的“端到端”行为决策,通过控制小车的行驶方向和速度实现路径规划和动态避障,并表现出良好的环境适应性。本文主要研究内容如下:(1)分析了当前农业车辆行为决策流程和人工智能研究的特点,设计了智能农业车辆从环境感知到行为决策的算法框架和基于ROS系统的智能农业小车。为了提高深度强化学习算法的收敛速度,本文根据示教学习思想,提出了结合示教经验的深度强学习算法DDPGwTE,并对经验回放机制进行了高TD误差经验优先回放处理的改进。(2)对算法各个部分进行设计并做出改进。①结合ROS系统的通信机制和Odom里程计系统对算法的环境状态输入和行为输出进行建模;②对四轮差速小车进行运动分析,将小车运动解算为线速度和角速度适应ROS系统控制;③根据状态更新特点设计了相应的奖励函数;④对算法模型中的深度神经网络进行构建,并根据优先经验回放权重设计了相应的损失函数;⑤设计了人工示教经验池和探索经验池的采样比例机制。(3)在Gazebo中设计、建立仿真场景,获取示教经验并对经典DDPG算法和本文提出的DDPGwTE算法进行仿真。使用罗技游戏手柄以人工操作仿真环境中的小车获取示教经验,最后在三种场景下对经典DDPG算法和本文提出的DDPGwTE算法进行了仿真。仿真结果表明,结合了人工示教经验DDPGwTE算法均能在1000个训练回合达到收敛,5000个回合总步数相比经典DDPG算法分别降低7.17%、12.86%、12.77%。(4)设计制作了 ROS智能小车并对仿真环境下训练收敛的算法进行迁移实验。对照仿真场景设计了无障碍、固定障碍、移动障碍三种情景下的实验,并将动态窗口法(DWA)作为实验对照组。首先对实验环境进行激光SLAM建图,以SSH远程登录小车的方式读取DDPGwTE算法控制的小车实验过程中的速度、瞬时奖励变化、并记录了两种算法在导航、避障过程中的轨迹,通过小车轨迹对应的速度和瞬时奖励变化分析了深度强化学习算法行为决策的有效性。本文结合智能农业车辆控制和农业生产环境特点,设计了基于一种基于深度强化学习的“端到端”行为决策算法,并在基于ROS平台设计的仿真环境和实验小车上对算法进行了仿真训练和实验,实验结果验证了算法在复杂环境下行为决策的有效性,对提高农业智能化水平有重要意义。
其他文献
企业的文化就如同企业的灵魂,是实现公司永续发展的核心动力。华能澜沧江水电股份有限公司从成立伊始,就注重加强企业文化建设,着力提升公司软实力,公司通过系统梳理、整合企业文化,提炼完整的企业文化核心理念体系,设计规范的视觉识别系统,制定企业文化建设实施方案,加快构建水电开发的战略支持型"三色"水文化,并大力开展责任、创新及和谐等特色文化建设,形成了勇于担责、奉献社会的崇高境界,艰苦奋斗、开拓创新的高尚
聚丙烯(PP)塑料具有轻质高强的特点,被广泛应用于汽车、包装、机械等领域,由于汽车等工业的快速发展,PP塑料的用量不断加大,伴随塑料使用量的增加产生了一系列的问题,其中最严重是石油资源消耗和环境污染问题。近年来,全世界对可持续发展和环境保护的意识越来越强,我国也加强环保法律规范推动生产方式向着环境保护方向发展。减少塑料使用对石油资源消耗和环境污染具有重要意义。为提高塑料材料经济性和环境友好性,本课
T-2毒素是单端孢霉烯族A类化合物中毒性最强的一种真菌毒素,广泛存在于玉米、黑麦、燕麦和大麦等农作物中,对人和动物的健康造成危害。T-2毒素大部分在肠道吸收降解,对动物的消化系统以及肝脏产生毒性损伤。研究表明T-2毒素可以穿过胎盘屏障,由妊娠母体进入胎儿,威胁胎儿健康。但是目前对于妊娠母体灌胃T-2毒素对子代影响的研究依然相当有限。因此,本研究以妊娠母鼠为试验对象,在母鼠妊娠后期和泌乳期进行T-2
由于枇杷果实皮薄多汁的特性,所以在采后极易受到机械损伤和微生物的侵害而发生腐烂变质,不利于长期贮藏和运输。低温贮藏是枇杷果实采后最常用的方法之一,然后长时间的冷藏会使枇杷果实出现果肉粗糙少汁、糖酸比例失调等冷害症状,最终失去商品性和食用价值。本文以“长虹”枇杷为试材,研究了外源钙和钙离子螯合剂处理对冷藏期间枇杷果实耐冷性的影响,探讨了 Ca2+减轻枇杷果实冷害的可能作用和机理,以期为枇杷果实采后保
纳米材料在农业生产中的应用受到广泛关注。水铁矿(HF)是一种亚稳定型天然铁氧化物纳米材料,具有极大的比表面积和高表面活性,控制和影响着环境中一些环境污染物和植物营养元素的形态、迁移和转化。水铁矿对重金属污染修复和微生物活性的影响方面已有较多研究,但对作物生长和土壤养分有效性的研究仍不多见。本文首先研究了不同浓度水铁矿、螯合铁(CI)、硫酸亚铁(FS)对稻麦种子萌发的影响和不同浓度水铁矿对水培小麦幼
土壤水分在陆地生产、气象变化和水文过程中扮演着重要角色,也是干旱监测和管理的关键。遥感技术为大范围、多时空监测土壤水分提供有力手段,同时还具有快速、及时和便捷等优点。随着遥感技术发展不断发展,国内外学者开始利用遥感技术进行土壤水分估算等相关研究。本文以南京市六合区北部为研究区域,探讨基于Sentinel-2影像的光学梯形模型(Optical Trapezoid Model,OPTRAM)的土壤水分
随着畜禽养殖业抗生素的大量使用,畜禽粪便已成为抗生素抗性基因(Antibiotic Resistance Genes,ARGs)的汇集热点。同时,我国作为动物养殖大国,畜禽粪便常常不经过处理或者处理不完善而直接施用于农田土壤中,这增加了土壤被抗生素和ARGs污染的风险。粪肥的施用会向土壤中引入抗生素和ARGs,增加土壤中ARGs的丰度和多样性。土壤是微生物的栖息地,同时是抗生素和ARGs的天然储藏
化肥过量施用造成的环境问题日益突出,当前条件下限制化肥施用量是农业可持续发展的重要措施。有机肥营养全面,能为作物生长提供全面的养分,在作物产量和品质的提高方面具有重要的作用。有机肥为作物生产提供了丰富的磷营养,且大部分为有机磷形态。植酸是有机肥中含量丰富的有机磷,依赖植酸酶水解,释放无机磷供植物吸收利用。植物根系分泌植酸酶,提高根际植酸磷的有效性。植物根系分泌植酸酶活性受植酸酶编码基因的调控。本研
茶树[Camelliasinensis(L.)O.Kuntze]是我国主要的经济作物之一,茶树品种作为基本的农业生产资料,是影响茶叶生产经济效益的重要因素,因此品种的选育始终是育种工作的重点。但是茶树中存在自交不亲和、杂交结实率低和远缘杂交不亲和等问题,从一定程度上限制了新品种的培育和种质资源的创新。所以,探究茶树的不亲和反应机制十分必要。虽然目前已有许多关于茶树自交不亲和机制的研究报道,但不亲和
番茄(Solanum lycopersicum L.)为茄科番茄属一年生草本植物,是世界上栽培最广泛的蔬菜作物之一。番茄属于喜温植物,但对高温敏感。在我国南方地区,夏秋季节高温是番茄栽培的主要限制因素,高温胁迫对其产量、品质和经济效益均会产生不利影响。番茄在不同生长时期对温度要求不同,对温度的敏感程度也不同。在高温胁迫下,番茄的生殖生长期比营养生长期所受伤害更严重。选择和培育生殖生长期耐热品种对番