基于强化学习的协同侦察攻击辅助决策

来源 :东南大学 | 被引量 : 0次 | 上传用户:radar14015
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着技术的不断发展,战场形势日渐复杂,仅使用人工来进行指挥决策有可能出现纰漏。使用强化学习来辅助完成复杂环境下协同攻击辅助指挥决策是当前解决该问题的一个研究方向。本文针对大场景下的多智能体系统大范围侦察决策和长距离协同攻击辅助决策问题,提出了基于强化学习的训练算法,设计对应的奖励值函数,并通过仿真实验进行了验证。本文主要完成了以下工作:一、针对大场景下的强化学习编队侦察问题,提出了一种PPO-QMIX多智能体队形侦察算法。将多智能体系统的行为分为编队队形调整和同步移动侦察两部分,设计多智能体强化学习QMIX算法进行编队队形调整,设计强化学习PPO算法实现行进侦察。通过多组不同场景的仿真实验验证算法的有效性。二、针对多目标长距离下的强化学习协同攻击辅助问题,提出一种PPO-QMIX智能攻击辅助决策算法。将多智能体系统的行为分为总体路径规划和协同攻击辅助两部分,设计PPO算法实现最短路径规划决策,设计QMIX算法完成攻击辅助最优决策。此外设置了两部分行为的多智能体系统状态界限,给出了决策算法的切换条件。通过多组不同场景的仿真实验验证算法的有效性。三、针对大场景下多智能体的侦察攻击辅助决策问题,在前两章算法的基础上提出了一个两阶段训练的框架,在第一阶段中采用多智能体编队侦察强化学习算法训练一个用于完成侦察任务的网络模型,在第二阶段中先使用侦察模型来进行侦察,再根据侦察到的信息完成进行后续的协同攻击辅助模型仿真并且使用多智能体协同攻击辅助强化学习算法训练一个协同攻击辅助模型,通过多组对比实验验证了算法的有效性。
其他文献
结合赣龙铁路第十八合同的施工实际 ,对铁路建设项目中种类繁多、数量庞大的施工技术资料的收集、整理归档和最后竣工资料的编制工作进行探讨。
期刊
生态文明建设作为我国“五位一体”总体布局之一,对推进新时代经济社会发展具有重大战略意义,带动了越来越多的环保工程投入建设。环保工程的公益性决定了其利润点低、投资回收期长,环保企业为了在承担社会责任与生存发展之间寻找平衡,必然要更加准确核算、控制环保工程成本。本文从环保工程运作模式入手,归纳分析环保工程各阶段的特点,剖析各阶段影响成本的因素,有针对性地探究贯穿环保工程全过程的财务成本控制方法。
期刊
结合赣龙铁路第十八合同段的施工实际,对新建铁路建设项目施工技术资料的收集、整理和竣工资料的编制工作进行探讨。
期刊
攻击决策问题是协同空战领域研究的核心问题之一,通过优化战机武器资源配置,以提高战机协同作战效能。针对动态协同空战攻击决策问题,系统分析空战环境的动态性,将空战动态划分为连续动态和离散动态,并建立多约束条件下动态协同空战攻击决策优化模型;设计了空战环境变化监测策略和种群多样性策略,通过迭代窗的设置,基于离散粒子群算法,提出了一种基于滚动迭代窗的启发式变异离散粒子群算法的动态协同攻击决策方法。通过仿真
期刊
目的 研究中药封包联合红外线干预在不完全性肠梗阻患者中的应用效果。方法 选取丰城市人民医院2021年1月—2022年1月收治的68例不完全性肠梗阻患者,采用随机数字表法分为对照组(n=34)和中药封包组(n=34)。对照组患者采取禁食、肠外营养、胃肠减压、抗感染等不完全肠梗阻保守治疗并使用红外线照射干预;中药封包组在对照组基础上联合中药封包(海盐+赤小豆各250 g)干预,每日1~2次。比较2组患
期刊
早在2003年3月,国务院办公厅转发教育部、全国妇联等部门《关于幼儿教育改革与发展的指导意见》,强调了0-3岁婴幼儿教育的重要作用,并将其纳入国民教育体系。2021年9月国务院颁布的《中国儿童发展纲要(2021-2030)》鼓励支持家庭开展亲子阅读,激发儿童的阅读兴趣,提升儿童阅读能力,形成全民阅读的风气,而国民的阅读兴趣、能力和习惯的培养迫切需要从关注低幼儿童阅读开始。本文以低幼儿童绘本阅读能力
学位
煤炭工业在生产经营过程中造成的环境污染对气候变化构成了严重威胁,因此该行业的碳信息披露十分关键。鉴于此,以陕西煤业股份有限公司为研究对象,分析其在2017—2021年碳信息披露的情况。分析发现,陕西煤业股份有限公司存在披露途径不规范、披露内容缺乏主动性与可比性三方面问题。因此,针对以上三方面提出相应的对策与建议,为企业提升碳会计信息披露质量提供参考。
期刊
小学语文学科内容中不单包含了语文的基础知识,也包含着中华优秀传统文化的精神,具有人文性与文化性的特点。小学语文教师应根据语文学科自身的特点,开展创新优化教学,实现对学生知识技能双重发展的目标。在新课改教育理念之中,小学语文教师应懂得如何将思想道德建设融入语文课堂教学活动之中,达到学科隐性教育的基本教学目标。本文分析研究如何在小学语文学科教学过程中,有效加强和渗透思想道德建设,进一步培养学生形成科学
期刊
<正>2023年3月3日,应急管理部党委专题召开部机关司局和事业单位“一把手”2022年度述职述责述廉会议,应急管理部党委书记、部长王祥喜出席并讲话。王祥喜强调,要坚决贯彻落实习近平总书记重要指示批示精神,按照党中央、国务院决策部署,以时时放心不下的责任感,强化安全防范,狠抓工作落实,坚决维护人民群众生命财产安全和社会大局稳定。王祥喜指出,部党委专题召开“一把手”述职述责述廉会议,是落实党中央有关
期刊
研究目的:通过观察针刺联合中药灌肠对治疗晚期卵巢癌合并不完全性小肠梗阻的效果分析。方法:对120例患者随机分成治疗组60例和对照组60例,对照组予基础支持疗法结合开塞露灌肠,治疗组在基础疗法的同时采用针刺联合中药灌肠,观察总有效率,腹痛、腹胀、恶心、呕吐的缓解时间,排气、排便时间,肠鸣音恢复时间,以及治疗前后腹部立卧位X片、生活质量(Karnofsky, KPS)的改变,观察治疗后60天内再次肠梗
期刊