基于深度强化学习的双体船姿态控制

来源 :中国舰船研究 | 被引量 : 0次 | 上传用户:huamin1028
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
[目的]针对双体船纵向运动控制中传统控制算法对精确的数学模型和系统参数的依赖问题,提出基于深度强化学习的纵向运动控制算法。[方法]通过设计奖励函数和神经网络结构以及调整相关超参数,并与双体船模型相结合,通过实验,比较深度强化学习DDPG算法和GA-LQR法在3种不同控制方式下的控制效果,以及在不同工况和初始状态下的鲁棒性。[结果]在相同工况下,DDPG算法相对于GA-LQR算法在控制效果上略有优势,但其控制过程中的鳍角输出更为激进。在不同工况和初始状态下的仿真实验中,当系统和环境模型发生较大变化时,DDPG算法的控制效果会受到较大影响,但在系统和环境变化较小的情况下,DDPG算法表现出更好的适应性,相较于GA-LQR算法更具优势。综合分析得出,DDPG算法在性能上与GA-LQR算法表现相当。[结论]基于深度强化学习的DDPG算法在双体船在纵向运动控制中具有应用潜力,为未来复杂海况下船舶运动控制提供了新的研究方向和方法论支持。
其他文献
报纸
南四湖是南水北调东线工程最大的调蓄湖泊,研究南四湖有色可溶性有机物(CDOM)的组成、来源与时空变化规律,对于保障东线调水水质具有重要意义。运用三维荧光光谱(EEMs)与平行因子分析模型(PARAFAC)等技术手段研究2019年5月及11月不同水文情景下南四湖CDOM组成与来源特征。结果表明,PARAFAC解析EEMs获得3种荧光组分,即微生物作用的类腐殖酸C1、陆源类腐殖酸C2和类色氨酸C3。其
期刊
根据内蒙古自治区根河市得耳布尔地区的地质工作成果,分别对该地区铅锌矿矿石中金属矿物和脉石矿物的矿物成分、特征进行了分析和总结,对矿石的化学成分和结构构造进行了概括和归纳。
期刊
嵌合体植物不稳定,洒金花朵则是其不稳定的极端表现。反演洒金花朵发育过程,推知花瓣原基为二维码式异质细胞嵌合体,经典嵌合体理论将其归结为不稳定性,而对不稳定性成因的阐述存在两大矛盾,因而无力解释洒金花朵的形成机制。利用结合了原套-原体、细胞组织分区两个学说的茎端生长锥综合结构模型,提出挤出-打印假说,阐明茎端生长锥中心区的子细胞输出过程,进而设想中心区“打印”二维码式周边区环带,从而圆满解释了洒金花
期刊
注意到一些奇树,其部分乃至半数异于另外部分,如此出奇,令人百思不得其解。网上调查发现,各地常见奇树报道,千奇百怪,甚至早在唐代就被记录在案。应用构件理论,总结认为这些奇树可以概括为构件罕杂现象,即异质构件罕见性地杂合。进而结合文献调研,认为构件杂合是现象,本质则是异质组织嵌合,其植株即为嵌合体。总之,认清本质,奇树之奇就成奇美。
期刊
高质量发展是全面建设社会主义现代化国家的首要任务,也是中国式现代化本质要求,经济高质量发展是高质量发展的核心内容。经济高质量发展,就是以高质量的产品和服务满足人民日益增长的美好生活需要,是贯彻新发展理念不断提升生产要素利用效率和配置效率,达到生产、流通、分配、消费循环通畅的经济持续稳定的发展。经济高质量发展关系到推进中国式现代化的全局。以经济高质量发展推进中国式现代化,必须以习近平经济思想为根本遵
期刊
本文基于我国社会经济的快速发展及人们对电能需求的日益增多,在对电力自动化输配技术特点进行分析的基础上,对如何做好并有效发挥输配电及用电工程自动化运行这一技术优势进行了较为深入地探讨,以期为电力系统相关部门进行决策提供一些参考。
期刊
桔梗[Platycodon grandiflorus(Jacq.)A.DC.]是我国传统的药食两用植物,具有极高的经济价值。桔梗中富含皂苷类、聚炔类和多糖类等多种化学成分,具有化痰止咳、抗菌消炎、抗癌、免疫调节和抗氧化等药理活性。为了使桔梗资源得到充分的开发利用,本文以桔梗作为研究对象,对桔梗中桔梗皂苷D和党参炔苷的提取工艺进行了优化,并对残渣中桔梗多糖的高效提取、分离纯化及其对小鼠免疫功能的影响
学位
<正>2024年2月22日,美的集团与通威股份在通威国际中心共同举行2024年年度战略合作协议签约仪式。双方将在光伏行业数字化、机器人、物流自动化、智慧楼宇、物流服务等领域展开全面深度的合作。美的集团合康新能光伏副总经理梁华栋、通威股份光伏商务部组件全球营销总经理邱新代表双方签署战略合作协议。美的集团企业业务总裁王新亮,通威股份董事长、CEO刘舒琪出席并见证签约。
期刊
研究何首乌对高血脂小鼠血清的影响,并探讨何首乌治疗高血脂症小鼠肝脏的转录组变化。60只昆明小鼠随机分为5组:正常对照组、高血脂模型组和高、中及低浓度何首乌提取液组。除正常对照组外,其他4组采用高脂饲料喂养,诱导建立高血脂模型。8周后高、中及低浓度何首乌提取液组分别采用1.0 g/mL、0.6 g/mL和0.3 g/mL腹腔注射(0.1 mL/10 g)。正常对照组,高血脂模型组腹腔注射等体积生理盐
期刊