无人机集群系统侦察监视任务规划方法

来源 :国防科学技术大学 | 被引量 : 0次 | 上传用户:xiaogang7922
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
如何将无人机集群系统部署于大范围环境中进行侦察监视,是未来无人机军事应用的重要问题之一。一方面,环境中往往分布着大量动态变化的子目标/子任务,亟需自动规划算法,实现无人机集群系统在不确定条件下进行连续侦察监视的快速规划;另一方面,无人机在复杂的环境中进行搜索时,往往需要人辅助提供一些关于环境的知识,所以需要设计良好的人与无人机进行交互的方式,实现在人辅助下进行搜索。基于此,论文的主要工作和创新点如下:(1)针对具有子模性规划目标的多智能体部分可观马尔科夫决策过程(MultiAgent Partially Observable Markov Decision Process,MPOMDP),首次提出了一种近似最优的多智能体在线规划算法。这种算法通过顺次分配技术(Sequential Allocation Technique)来依次计算每个智能体的策略,贪婪地最大化单个智能体对团队任务目标的边际贡献(Marginal Contribution),从而避免了直接考虑团队的联合策略(其导致的计算代价与智能体个数呈指数关系),使得计算复杂度随智能体个数呈多项式关系。论文通过理论证明该算法具有很好的近似最优性能。创新性工作为:使用顺次分配技术来计算智能体的策略,相比于其他的搜索团队联合策略空间的方法,这种方法具有很好的可扩展性,并能够满足问题的实时性要求。(2)针对传递函数解耦的部分可观马尔科夫决策过程(Transition-Decoupled POMDP,TD-POMDP),首次提出了具有良好可扩展性的在线规划算法——传递函数解耦的部分可观蒙特卡洛规划(Transition-Decoupled Partially Observable Monte-Carlo Planning,TD-POMCP),即一种基于蒙特卡洛树搜索(Monte Carlo Tree Search,MCTS)和max-sum的分散式在线算法。TD-POMCP的创新主要包括:1)根据局部智能体团队的局部联合动作和联合观测,利用TD-POMDP模型中变换依赖的弱耦合关系,对每个智能体分别构建一个前向搜索树;2)基于MCTS这种基于采样的搜索算法对每个智能体的搜索树进行扩展和更新;3)所有智能体通过分散式交互的方式同时进行对各自搜索树的扩展和更新。在搜索树中的每个规划步骤,通过max-sum这种分散式任意时间近似算法进行智能体的动作选择。论文通过理论证明这种方法具有很好可扩展性、鲁棒性、实时性和最优性,并且通过相关的仿真实验证明论文的方法可以成功应用于大规模TD-POMDPs。(3)基于MPOMDP和TD-POMDP模型,分别建立了在威胁环境和不确定性下的无人机集群系统进行侦察监视的集中式和分散式问题模型。这些问题的状态空间大小随环境中监视子目标个数的增加呈指数增长,使得通用的规划求解器无法求解这种大范围的侦察监视问题,更无法满足实际任务的实时性要求。因此,论文设计了随监视子目标个数线性增长的信念状态表示方式,并进一步定义了无人机集群系统侦察监视问题的形式化模型。基于此,设计了仿真实验,实验结果表明论文的算法能够成功应用于大规模无人机团队在大范围环境中进行集中式/分散式侦察监视的规划问题。与现有的侦察监视问题的求解方法相比,论文设计的问题模型与求解算法的创新点包括:1)基于智能体模型描述了无人机与环境和与其他无人机之间的交互方式;2)环境的模型能够表达其在时间和空间上的部分可观和非静态性质;3)求解算法在进行蒙特卡洛仿真时,通过不断保持对健康约束的检测,在规划中能够处理无人机可能遭受的来自威胁的伤害。(4)针对概率知识和人辅助下进行搜索的决策问题,建立了一个新颖的模型,即机器人和人的搜索问题(Robot-Human Search,RHS)。RHS描述了一类不确定知识下的搜索问题:一架自主无人机在人的有限辅助下,搜索环境中的某一物体(如一架坠落战机的碎片)。环境中的不确定性体现在物体的回报值以及人的可利用性(Availability)。无人机的目标是最大化所获物体的回报值并最小化总的搜索代价。论文证明这一结合人辅助的搜索问题在多项式时间内可解,这一结论在之前的文献研究中并未得出过。进一步,通过仿真实验来验证论文提出的方法,实验结果证明论文的方法显著优于一些基准算法。
其他文献
目前,在《中国制造2025》以及“智能制造”的国家战略意志影响下,我国航空制造业正经历一场大变革。有必要站在新的视角,重新审视传统的生产模式,权衡利弊,以企业的生产自动
锻造镁、铝车轮模锻复合冲孔模具是针对闭式锻造铝、镁车轮毛坯一次能同时完成冲中心孔、冲边孔及冲气门孔多个工序完成的任务,主要特点是将闭式锻造镁、铝车轮毛坯正面中心
目前,中国已成为世界第二大石油消费国和第一大石油进口国,同时也是全球天然气和化工产品重要的生产国和消费国之一。作为全球电力和自动化技术领域的领导企业,ABB积极与国内
目的:探讨阿托伐他汀在急性冠脉综合征早期应用的有效性。方法:回顾性分析急性冠脉综合征住院患者80例临床资料,按血脂水平分为正常血脂组(A组,36例,给予安慰剂10 mg/d)、偏高脂
中国电器工业协会标准化工作委员会秘书处于2020年5月7日,以腾讯网络视频会议的形式,组织召开了"中电协团体标准制修订计划实施研讨会"。来自中电协标准化专业委员会风电设备
目的研究中青年男性腹股沟疝患者采用腹腔镜完全腹膜外疝修补术(TEP)的临床治疗效果。方法选取2016年10月~2017年10月收治的68例腹股沟疝中青年男性患者作为研究对象,采用随
整体叶盘是新一代先进航空发动机实现结构创新与技术跨越的核心关键零部件,其表面质量和型面精度对航空发动机的气流动力性和使用性能影响巨大。目前整体叶盘的主流加工工艺
高校的校规已经成为高校引起法律诉讼的主要方面,高校校规的合法性是高校法制化的重要内容.本文在全面分析高校校规的性质的基础上,提出了建构高校校规合法性的思路与设想.