【摘 要】
:
随着自动驾驶技术的不断发展,越来越多的车辆搭载了用于环境感知的不同种类传感器。在这些传感器中,激光雷达与摄像头最为瞩目,但激光雷达的点云数据与摄像头的视觉信息之间存在着极大的数据结构差异,给融合带来一定的困难。当前的感知算法研究更加关注单模态传感器,融合算法实际上并未达到应有的效果。在感知环节中,3D目标检测是一项关键任务,能够为后续决策提供重要前提依据。本文通过融合激光雷达与视觉信息进行3D目标
【基金项目】
:
四川省科技计划项目(2019YJ0167)“结合视觉信息的激光雷达驾驶环境智能感知关键技术研究”,研究年限:2019.1-2021.12
论文部分内容阅读
随着自动驾驶技术的不断发展,越来越多的车辆搭载了用于环境感知的不同种类传感器。在这些传感器中,激光雷达与摄像头最为瞩目,但激光雷达的点云数据与摄像头的视觉信息之间存在着极大的数据结构差异,给融合带来一定的困难。当前的感知算法研究更加关注单模态传感器,融合算法实际上并未达到应有的效果。在感知环节中,3D目标检测是一项关键任务,能够为后续决策提供重要前提依据。本文通过融合激光雷达与视觉信息进行3D目标检测,探索多模态数据融合方法,主要研究内容如下:(1)针对多模态数据增广方式受限的问题,研究了多模态融合理论。将激光点云与图像转换到统一坐标系下,采用满足多模态数据一致性的全局数据增广与真值采样数据增广,提高数据集的多样性,进而使模型具有更强的泛化能力,为后续融合奠定基础。(2)针对激光点云与视觉信息数据结构差异造成的融合困难,提出了多尺度特征融合策略。将稀疏点云编码为体素形式以实现数据的规则化,在点云特征提取的主干网络中添加多尺度注意力模块以适应目标的尺度变化,通过投影关系确定体素格子对应的图像特征,实现了点云与图像的特征融合。(3)针对点云与激光雷达特征融合不充分的问题,提出了特征-候选区域融合的3D目标检测流程。综合激光点云与图像特征,利用易于训练的图像2D目标检测结果辅助3D目标检测任务,在多尺度特征融合的基础上添加后端融合模块,实现了激光点云与视觉信息的多级融合,证实了多模态的有效性。(4)针对多模态融合效率难以满足实时需求的问题,提出了单阶段无锚框特征融合网络。以多模态的有效性为前提,设计体柱编码的点云特征提取策略,在获取点云特征与图像特征的基础上,采用单阶段无锚框策略进行3D目标检测,进而平衡驾驶场景下的效率与精度。在数据集上进行测试与验证,高效的多模态融合3D目标检测方法获得了稳定可靠的检测结果。
其他文献
新课改背景下,教师应重视对学生核心素养的培养,除了向学生传授基础知识之外,也应注重对学生的思维进行拓展,提升学生解决问题的能力。数学学科具有一定的复杂性,对于小学生而言,学习难度较大,这就需要数学教师深入探究教学策略,激发学生学科兴趣,使其爱上数学,进而提升其数学学科核心素养。文章主要对核心素养下的小学数学深度学习策略进行了探讨,以供参考。
产教融合、校企合作是职业教育发展的方向,黑龙江护理高等专科学校医学检验专业在此人才培养模式下以专家指导委员会和模拟检验中心为实践基础,在课程设置、专业共建、技能培训、顶岗实习、双师队伍建设等方面进行了脚踏实地的研究,以期促进医学职业院校的健康发展,为国内同类医学职业院校检验专业的发展提供参考。
节能环保产业与化工产业的技术协同日趋突出,产业融合更加迫切。以扬州某高职院校为例,服务于节能环保、石油及化工产业、生物医药产业的环境工程技术省级高水平专业群实施“1+X”证书试点,可有效促进基于“1+X”证书导向的人才培养模式形成。针对现有“1+X”证书存在技能供需吻合度不够、1与X融合深度不够的问题,提出通过加强调研推进改革顶层设计,对接需求推进X证书开发和“三教”改革,以X证书为导向重构“三全
在多接口多信道无线Mesh网络中,信道分配是一个关键问题.目前,信道分配主要存在网络连通性不足、信道间存在传输干扰、信道利用率低、吞吐量小以及信道分配欠佳导致的负载均衡等问题.针对上述问题,本文提出一种基于负载均衡的多接口多信道分配算法DACA-LB.该算法首先设置发送和接收2个静态接口以及专用信道来保证邻居节点之间的连通性;其次,根据CPU利用率、内存利用率以及网络利用率计算最大负载阈值,当静态
垃圾分类是与化学密切相关的社会热点问题,垃圾分类的项目式学习让学生在项目式学习中通过了解垃圾影响环境情况、亲身参与垃圾分类回收、给县长写信提出建议、梳理化学核心知识、探究金属的回收流程、展示项目学习成果,提升化学学科核心素养,初步形成参与社会决策的意识。
糙米发芽前的吸水是导致发芽糙米裂纹产生的根本原因。为降低发芽糙米爆腰率,改善其萌发工艺,基于Peleg方程,探讨了糙米在浸泡吸水和微量吸水两种吸水模式下的动力学性质,分别建立了动力学方程,并比较了两种吸水模式制备的发芽糙米的爆腰率。试验结果表明,Peleg方程能较好地描述糙米的两种吸水性质,相对误差E <10%。通过对比Peleg方程的常数K1和斜率K2,发现糙米品种不同,其吸水动力学性质存在差异
自新文化运动以来,中国美术教育吸收西方自然科学、人文科学、社会科学的优秀成果,取得了瞩目的成绩。西方的教学思想是根植于西方的文化土壤的,在实际的教学中,教师需要回归中国文化寻找与借鉴相关内容。该文作者围绕当下基础教育核心素养的培养目标,以先秦美学思想在美术基础教育中的运用为例,提出相关的意见。
我校积极响应习近平总书记"培养创新型"人才的号召,依据校情、学情开展创客活动,实施STEM教育。通过"自愿参与、线上线下培训及自学",我们建设了一支STEM专业素养高超的教师团队。STEM课程精彩多样,教学模式项目化,是我校实施STEM教育的核心及亮点。多个创新实验室及家庭创客空间的创建,为STEM教育提供了充足的场所。我校STEM教育评价多元化,过程性与终结性合理结合。经过两年的探究实施,我校学