【摘 要】
:
路径规划模块作为自动泊车系统的重要组成,在系统中起到承前启后的关键性作用,围绕着路径规划进行研究对于改善自动泊车的性能与体验具有重要意义。本文在总结已有研究成果的基础上,针对垂直车位的自动泊车场景,设计基于深度强化学习的自动泊车算法框架。从算法框架出发,搭建了基于鱼眼相机的全景环视系统,设计基于环视系统的车位检测算法;建立了自动泊车仿真训练平台,完成了基于深度强化学习的路径规划算法的改进、训练与性
论文部分内容阅读
路径规划模块作为自动泊车系统的重要组成,在系统中起到承前启后的关键性作用,围绕着路径规划进行研究对于改善自动泊车的性能与体验具有重要意义。本文在总结已有研究成果的基础上,针对垂直车位的自动泊车场景,设计基于深度强化学习的自动泊车算法框架。从算法框架出发,搭建了基于鱼眼相机的全景环视系统,设计基于环视系统的车位检测算法;建立了自动泊车仿真训练平台,完成了基于深度强化学习的路径规划算法的改进、训练与性能分析。为验证以车辆位姿作为强化学习算法输入的可行性,设计基于环视系统的车位检测算法。首先根据矫正效果,选择合适的鱼眼相机模型用以标定获取相机内参。其次通过联合标定实验和拼接融合技术,获得鱼眼相机对应的单应性矩阵和权重矩阵。然后对拼接图片进行灰度化、滤波、二值化、膨胀与腐蚀等预处理操作,通过sobel算子边缘检测与霍夫变换,再经过线段整合程序筛选和处理,得到符合条件的车位线,根据车位框特征整理为有效车位,最终输出车位角点坐标。为模拟现实世界中车辆运动与干涉,基于阿克曼转向几何,建立低速泊车工况下的车辆运动学模型,实现仿真时的车辆位姿计算。同时,为保证泊车过程中的安全性,基于快速排斥实验和跨立实验设计车身碰撞检测程序。为分析泊车算法的规划能力,基于圆弧直线泊车,通过几何干涉计算得到车辆的可泊区域,作为对标的可泊区域。针对垂直车位的泊车场景,定义了强化学习要素:将车辆位姿、方向盘转角和汽车与障碍物的最小距离作为状态,以目标方向盘转角为动作。针对强化学习随机探索效率低下的问题,以车辆后轴中心和目标位置的连线,与航向角的夹角计算引导奖励。同时以车身与周围障碍物的最小距离计算避障奖励,进一步提高智能体选取动作的安全性。针对训练过程中成功样本与失败样本失衡问题,以回合平均奖励作为优先级,设计基于优先队列的经验池结构对样本进行存储和淘汰。针对训练前期不同起始位姿的成功泊车样本互相干扰智能体的学习效果的问题,提出基于课程学习的多阶段训练方法逐渐扩大初始位姿的随机区域。在完成上述准备工作后,设计了智能体神经网络的结构,基于Python语言搭建自动泊车的仿真训练平台。结合经验与调试效果,设置了强化学习的训练超参数。最后,对提出的路径规划算法进行训练和性能分析。仿真实验表明:提出的算法收敛速度加快;经过训练得到的规划器具有良好的安全性和健壮性,与传统的基于几何规划的RS曲线方法相比,有着更强的规划能力和泛化能力。
其他文献
随着现代社会的高速发展,各种基础设施的建设对土体的承载能力与变形控制有了更高的要求,在土力学中,怎样科学又准确地计算地基沉降量一直是待解决的难题。目前国内最常用的沉降计算方法为国家规范推荐的分层总和法,由于规范法经验系数取值为0.2-1.4,误差较大,是一种半理论半经验的沉降计算方法,且计算是采用通过室内试验获得的压缩模量,并不能反映土体的原状性。依据现场原位试验而建立的切线模量法可以克服室内试验
随着我国城市发展模式的转变,城市更新成为很多大城市发展的主要方向。使用后评价对指导城市更新具有重要意义,一方面可以对城市更新的效果进行科学地评价并发现存在的问题,另一方面可以将评价结果反馈给策划端,促进规划设计标准的完善和质量的提升,有效指导未来的实践活动。然而,城市更新项目具有时间周期长、空间范围广、利益群体复杂和目标多样等特点,问卷调查和专家访谈等传统评价方法的局限性日益显现。随着智能终端的普
作为下一代重点发展的光伏发电技术,有机光伏电池(OPVs)以质量轻、柔性、半透明、可溶液加工等优势备受关注。得益于非富勒烯受体材料的突破性进展,近年来有机光伏器件效率迅速提升,其最高能量转换效率已超过18%,展现出广阔的发展和应用前景。对于高性能非富勒烯受体分子的设计,目前研究重点主要集中在中心核构建、侧链工程、π桥单元修饰和端基修饰四个方面,其中侧链工程作为一种可快速改变分子光电性能以调控活性层
语义分割任务是计算机视觉中最重要的任务之一,该任务要求将输入图像的每个像素都匹配到一种语义类别中。在实际应用中,语义分割在自动驾驶和机器人导航视觉等领域发挥着重要作用。近年来,语义分割备受关注,研究人员基于卷积神经网络(CNNs)提出了各种针对语义分割任务的技术方案,这些方案取得了良好效果,但也普遍存在一个共同的缺点:网络参数过多,计算成本高。因此,设计一个有效的且小尺寸的实时语义分割模型意义重大
缆索承重桥梁在交通运输事业中发挥着重要作用。拉索作为缆索承重桥梁的主要承重构件,容易受到交通荷载和外界环境的作用而产生损伤,从而导致拉索承载能力下降。拉索失效造成的工程事故时有发生,对社会经济发展产生严重影响,因此必须重视对缆索承重桥梁拉索索力的健康监测。传统的索力测试方法属于接触式方法,需要人工布置索力测试传感器,存在测试成本高和测试效率低等问题。本文开展基于计算机视觉的索力测试方法研究,可以为
在常见的半监督分类算法中,基于图的半监督分类算法在近年来取得了不俗的分类效果。传统的基于图的半监督算法有两个主要缺点。首先,表示相似度矩阵的图的是在分类器训练之前预先定义好的,这样的图并不能很好地利用分类器训练和相似度矩阵学习之间的交互作用。其次,当处理带噪声或者冗余特征的高维数据集时,在原始高维数据空间构建的图是不合适的,甚至使得分类效果下降。在本文中,我们提出了一种面向高维数据的基于图的半监督
随着汽车智能化与网联化的发展,汽车ECU的功能和结构愈加复杂,车内ECU的数量多达100个以上,对ECU的软件升级提出了更高的要求。诊断刷新系统作为整车诊断的关键部分,对车载ECU的软件升级起到重要的作用。设计安全、可靠、高效的诊断刷新系统可以大幅度提升ECU软件升级的性能。目前基于CAN总线的诊断刷新系统因其带宽不足,使得ECU刷新效率低、更新时间长。针对以上问题,本课题依托广州某整车厂诊断开发
目前由于城市地下空间的不断开发,既有下卧盾构隧道面临的安全风险越来越大,上方的基坑工程施工难免会对其产生一定的影响。因此不仅要满足基坑自身的稳定性要求,还要重点关注管片结构的变形,防止开裂破坏的风险。尤其对于变形敏感的软土地区,准确的预测基坑卸荷引起盾构隧道的附加内力与变形以及分析不同工程措施控制变形的效果具有很大的现实意义。针对这一问题,采用理论解析及数值模拟的方法开展了以下工作:(1)在基坑卸
信息图表(如幻灯片、技术文档等)是办公软件的重要组成部分,是一种通过信息块展示信息的可视化图表。对信息图表进行信息挖掘,可以获取大量的数据、知识等,具有重要的研究价值。信息块识别任务是挖掘信息图表中信息的重要一步。现有的信息块识别工作利用空间接近性原则,将元素分组为多个信息块,然而,现有工作存在两个重要不足:第一,现有工作忽略了信息图表的颜色和结构特征,从而导致在识别信息块时容易产生元素遗漏的现象
目的1.研究使用Mitronic主动脉打孔器构建简化气管食管瘘模型的方法。2.使用人脂肪间充质干细胞瘘口局部注射,研究干细胞治疗的安全性和有效性。3.对瘘口组织进行测序及生信分析,探索瘘口愈合过程中的差异蛋白表达。方法1.动物准备比格犬13只,随机分为3组:第1组:空白组,无操作,1只(1101);第2组:手术组,造瘘手术+磷酸缓冲盐溶液(phosphate buffer saline,PBS)局