车载全向视觉感知系统的研究

来源 :中国科学院大学 | 被引量 : 0次 | 上传用户:fitye228
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
交通事故对人们的生命财产安全造成严重威胁,全向视觉感知系统作为高级驾驶辅助系统的重要组成部分,能够实时采集车辆周围的图像信息,及时预警车身四周发生的危险,有效提升汽车的主动安全性能。论文主要针对现有全向视觉感知系统的有效视野受限、3D全景拼接存在重影、缺乏物体检测和距离信息等问题进行研究,提出了基于多目鱼眼相机信息融合的车载全向视觉感知系统。论文的主要研究工作和创新点如下:  1、针对现有3D全景拼接算法的有效视野受限、拼接区域存在重影等问题,提出了一种基于3D投影的全景拼接算法。提出了适用于车载鱼眼相机的畸变校正算法和相机外参估计算法。设计了3D碗状模型,四路鱼眼相机同时向3D碗状模型投影以完成3D全景拼接,引入网格变形算法和二次成像模型解决重影问题。实验证明,该算法能够有效地对鱼眼相机进行畸变校正和外参估计,消除全景拼接过程中的重影,3D全景拼接效果优于市面上的其他全景成像系统产品。  2、针对全景拼接得到的全景图像边界不规则的问题,提出了一种基于亚像素缝雕刻的图像整形算法。通过提出直线约束机制、前向能量代价因子和能量扩散代价因子,算法选取对图像内容影响最小的最优缝在0~1个像素范围内进行亚像素缩放,在保证图像内容完整性的同时完成全景图像整形。实验结果表明,本文算法的峰值信噪比(peak signal to noise ratio,PSNR)、结构相似性指标(structural similarity,SSIM)、整形效果均优于基于图像填充和基于网格变形的全景图像整形算法。  3、针对物体检测神经网络计算复杂度高、不易在车载嵌入式平台上部署的问题,提出了物体检测神经网络的量化训练算法。采用低比特定点数代替浮点数进行神经网络训练。提出了自适应量化算法,根据各卷积层的权重及输入的概率分布,自适应地计算其最优的量化策略。实验结果表明,相比于32bit浮点数模型,本文量化算法训练得到8bit模型的物体检测平均准确率(mean average precision,mAP)下降不超过1%,4bit模型的mAP下降不超过3%。  4、针对现有神经网络框架不支持低比特定点数运算的问题,设计并实现了适用于低比特定点数的神经网络前向计算框架。提出基于滑窗和基于矩阵乘法的定点数卷积算法,并根据卷积层的参数自适应地选择各卷积层最优的计算方式。采用NEON指令集加速定点数卷积。实验结果表明,8比特NEON定点数卷积比原浮点数卷积加速8-9倍,4比特NEON定点数卷积比原浮点数加速12-13倍。  5、针对各鱼眼相机的视角有限且采集到的信息间存在冗余的问题,提出了多目鱼眼相机信息融合算法,构建车载全向视觉感知系统。将四路鱼眼图像中孤立的物体检测信息变换至3D全景图像中进行信息融合。提出了基于单目车载鱼眼相机的障碍物距离估计算法,对车辆周围的物体位置信息进行场景重建。实验表明,通过多目鱼眼相机的信息融合,3D全景图像中的障碍物信息更加准确、直观。障碍物到本车的方向角和距离的估计误差在可接受范围内。
其他文献
近年来,随着微电子技术的不断进步,集成电路制造产业得到迅猛发展。在集成电路芯片生产的过程中,圆片级芯片测试,已经成为不可缺少的步骤和环节。而芯片测试探卡则是圆片级测试工
学位
本论文研究主要以APGⅡ系统为框架,选择分别隶属于被子植物不同演化水平和分类等级的一些关键类群,包括八角科(Illiciaceae)和五味子科(Schisandraceae)、列当科(Orobanchaceae
可调谐光栅由于衍射光角度以及衍射光强可调而有其广泛的应用需求和研究意义。MEMS技术与可调谐光栅结合一方面可以实现微型化,另一方面可以获得更多、更好的性能。但随着周期
学位
红外系统工作必须面对无数可能的场景,而现场实验是高成本的,而且只能提供有限的信息。虽然利用计算机技术的红外图像动态仿真在真实性上比实地做实验差,但却能提供预示系统性能
金钗石斛是兰科石斛属,单子叶植物,是药用和观赏两用植物,具有极大的经济价值。本论文研究了金钗石斛DnAP1基因的功能。首先从金钗石斛中克隆DnAP1基因编码区,构建其超表达载体;
集成电路自诞生起就随着CMOS工艺技术的进步而快速发展,工艺节点的不断更新提高了电路的集成度,但也给集成电路的设计带来了挑战。近年来无线通信技术的迅猛发展,锁相环作为一种
微陀螺是近年来MEMS领域研究的一个热点,它由于体积小、重量轻、成本低等特点而受到广泛关注。其中,同为集成多轴惯性检测单元(IMU)的核心构件,X轴微陀螺的研究难度大于Z轴微陀
学位
本文设计了一个完整的sigma-delta模数转换器,包括调制器和滤波器。Sigma-delta调制器利用了过采样和噪声整形的技术,以速度换精度,是一种常用的一种高精度的模数转换器,在音频,测
γ干扰素(IFNγ)是肿瘤免疫中一个关键的细胞因子,很多研究结果显示IFNγ在机体排斥肿瘤的过程中起重要作用。DMBA/TPA两步法致癌模型是一个经典的皮肤肿瘤模型,模拟了人类肿瘤
学位
随着医学领域信息化进程的不断推进,医疗纪录的电子化给个人接触、使用和传播敏感的病人数据提供了潜在的可能。在这种情况下,保证医疗资源信息安全使用成为迫切需要解决的关键