基于深度强化学习的车辆自主避撞决策控制模型

来源 :汽车安全与节能学报 | 被引量 : 0次 | 上传用户:crazyapple123
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
为提高车辆对行驶环境的自我学习和决策能力,提出了一种基于深度确定性策略梯度(DDPG)的车辆自主避撞决策控制模型。基于Markov决策过程的强化学习理论和车辆纵向运动学特性,设计了决策所需目标对象及自车信息的状态空间和自车减速度的动作空间,以安全性、舒适性和效率因素为多目标奖励函数的端到端的车辆自主避撞决策模型。利用Matlab/Simulink构建的DDPG算法与交通环境的交互模型,通过了前车静止(CCRs)和前车制动(CCRb)场景测试。结果表明:本决策算法具有很好的收敛性,引入加速度和冲击度的极限值
其他文献
研究了粉煤灰-钢渣-水泥复合胶凝材料的水固比、原料配比、养护时间、CO2压力等因素对固碳率和抗压强度的影响。实验结果表明,采用50%钢渣与10%粉煤灰掺比的试件,在剩余水固比w/s=0.25时达到了最高的固碳率和抗压强度。当CO2养护压力由0.2 MPa上升到2 MPa时,固碳率提高了45%。XRD分析表明与自然养护对比,经矿化养护后样品生成了大量碳酸钙;SEM分析观察到矿化养护后矿化产物CaCO3相互交织,填充了孔隙,使微观结构更加致密,
某电厂超滤系统额定出力为2464 t/h,超滤膜为外压式中空纤维膜,膜材料为改性聚醚砜(PES),单支膜面积60 m2.超滤系统运行4年后,出水浊度增加,SDI值超出反渗透系统进水要求,经
针对国内40台不同容量等级、参数水平、冷却型式的汽轮机发电机组,在调研各机组通流改造技术方案、改造前后汽轮机热耗、改造静态投资、改造节能效果的基础上,重点分析实施通流改造项目的经济效益,并对比不同外部条件对改造效益的影响。研究结果表明,汽轮机发电机组通流改造改造后100%THA工况下发电煤耗可降低5~15 g/kWh,考虑我国煤电机组长期处于中低负荷运行的客观现实,实际发电煤耗下降更多。在当前改造投资水平、利用小时数和市场煤价条件下,实施通流改造项目的投资回收期普遍为6~8年,而在低煤价、低小时数地区,实
分布式微电网中的设备具有分布广、数目多、协议互异、惯量小的特点,为了实现离网型微电网的稳定运行与有效监控,微电网能量管理系统(EMS)需要具备高速、可靠的信息通信系统
为给无人驾驶车辆精确制定城市路口通行轨迹提供先验信息,提出了在边缘计算平台中基于驾驶员意图分类和Bezier曲线相结合的轨迹预测算法。分析2个路口230辆车的真实通行数据,提出了基于支持向量机的驾驶员意图识别算法,预测路口车辆直行、左转及右转的概率;用基于Bezier曲线和代价函数相结合的通行轨迹预测方法,预测其路口通行轨迹。结果表明:经过与采集的120辆车的实际数据对比,驾驶员意图分类算法准确度在92.5%以上,车辆预测轨迹与真实轨迹间最大偏差范围在22.3~57.9 cm之间,所有车辆预测轨迹与真实轨
碳质气溶胶是大气PM2.5的重要组成成分。为深入了解龙游碳质气溶胶对冬季雾霾污染的影响,于2018年1月11日至2月5日在龙游县的三个站点进行了颗粒物采样研究。着重对样品中的有机碳(OC)和无机碳组分(EC)浓度的变化、OC/EC和OC与EC相关性等进行分析,研究不同污染时期碳质气溶胶的特征。结合后向轨迹方法,重点分析重度雾霾污染时期区域传输对龙游大气颗粒物浓度的影响。结果表明建设大楼和湖镇站点OC浓度主要受机动车排放和化石燃料燃烧影响,夏金站点OC浓度主要受生物质燃烧影响。在重度雾
以水煤浆锅炉SCR脱硝系统为研究对象,以FLUENT模拟计算为手段,探究了合理的导流板设计对SCR反应系统流场及氨浓度分布的重要作用。结果表明,加入导流板后,第一层催化剂上端速度分布偏差和氨浓度分布偏差分别为14.32%和4.86%,压降为893 Pa,满足预期目标。进一步通过改变SCR出口水平烟道导流板长度及角度,以SCR出口速度分布云图为判断基准,探究了合理的导流板结构设计对流场均布的重要性。
针对ASM-600进口油站换热器存在换热裕量偏小的现状,对其国产化替换并进行提升传热性能的改进。从理论上运用传热效率-传热单元数法,分别核算改进前后的温降值,通过投运实践并对比,证实了该换热器国产化改进实施的可行性,可为同类型设备加速国产化步伐,提供借鉴和参考。
为了减少混合动力汽车(HEV)油耗和有害气体排放量,提出了基于交叉—变异蜂群算法的参数优化方法,通过建立车辆的动力学模型、关键部件模型,综合运用发动机、电机及动力电池的效率,制定了能量管理策略。以动力系统参数和能量控制策略参数为优化变量,建立了多目标优化模型。在蜂群算法基础上,使用交叉—变异策略加深局部搜索方法的优化深度,使用半随机半保留方法提高了全局搜索效率。结果表明:经美国城市循环工况(UDDS)工况验证,优化后油耗减少了4.85%,CO排放量降低了19.83%,碳氢化合物(CH)排放量降低了8.08
电动化、智能化、网联化、共享化(CASE)是汽车技术发展的趋势。根据国际能源署(IEA)的预测,到2050年,以包括插电式混合动力在内的电动化汽车将占有市场产品97%的份额。越来越严苛并要求通过实际行驶条件下检测的排放法规也对先进发动机技术,特别是发动机控制技术提出了新挑战。该文围绕基于模型的发动机控制开发中的优化问题,从前馈控制优化、反馈控制优化和动力总成全局优化3个层面,分析了人工智能(AI)技术在上述开发场景中的应用案例,展望了人工智能在发动机控制开发中的前景。研究表明,人工智能技术能将推动发动机控