基于深度学习的单目深度估计方法研究

来源 :南京航空航天大学 | 被引量 : 0次 | 上传用户:qsk
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
先进驾驶辅助系统(Advanced Driving Assistant System, A-DAS)是当前智能车辆领域的研究热点,前视场景深度信息是A-DAS中避障和行人保护模块的主要信息源。针对基于3D激光雷达获取的景深信息稀疏度较高,在处理具体前视目标距离估计时,需要将深度图与基于可见光图像的障碍物检测与识别结果进行时空匹配与关联等相关问题,本文提出了一种利用车载前视单帧图像实现在线进行景深估计与障碍物相对距离统计的方法。本文的主要工作如下:
  首先,本文研究了一种基于卷积神经网络(Convolutional Neural Network,CNN)的无监督景深估计方法。此方法无需在训练过程中使用输入图像的真实深度数据作为标签,仅通过图像就可以提取对应的稠密深度图。在离线训练过程中,利用卷积神经网络强大的拟合能力,根据双目图像立体匹配的原理,训练神经网络逐像素地估计视差图;在线景深估计过程中,待测试的单帧图像通过预模型参数拟合出视差图,结合焦距和基线距离信息即可将视差图转换为场景深度信息。本方法将双目图像的左右视图都输入到神经网络之中,使神经网络可以同时预测左右视差图,并在损失函数中加入左右一致性损失项,进一步约束视差图生成的准确性;为了进一步提高前视目标物距离估计的准确率,本文提出了一种多尺度统一的方法,使各个尺度特征图的优化目标一致,从而减轻深度图中目标物表面的“空洞”现象。
  其次,为了进一步提高景深估计的精度,本文在无监督的景深估计方法的基础上,结合雷达采集的稀疏真实深度数据,提出了一种半监督的景深估计方法。此方法在训练过程中引入稀疏的真实深度数据,形成部分深度标签。与纯粹的无监督景深估计方法相比,此方法的误差减小了3.6%。
  最后,将预测出的景深估计图与目标检测与识别结果相结合,获取前视场景中具体目标的距离信息,将其作为 A-DAS 中避障和行人保护模块的输入。此方法以目标实例分割方法为基础,利用单帧图像将驾驶场景中最常见的交通参与者,如车辆,行人等目标分割出来,之后将分割模板直接与其对应的深度区域进行融合。此外,针对分割出的障碍物,提出了基于深度图中位数统计的目标距离估计方法,最终得到障碍物的整体深度,以供驾驶辅助系统做出不同的驾驶辅助判断。
其他文献
社会经济的不断进步,带动了航空运输业的快速发展,但与此同时运输过程中能源消耗对环境产生的污染问题也日益凸显。航空碳排放问题日益受到了国际社会的强烈关注,我国政府对航空运输业绿色发展也予以高度重视。要想实现航空运输业节能减排目标,必须正确认识和把握航空运输行业发展和减排之间的关系、碳排放产生原因、趋势,筑牢理论基础。本文以1998~2017年中国航空运输业碳排放为研究对象,从源头(碳排放核算)到展望
学位
近年来,随着航班量的快速增长,终端区空域拥堵现象越来越严重,航班正常率难以得到保证。空域扇区结构不合理会导致管制指挥的复杂性上升,造成扇区之间管制工作复杂性失衡,是终端区空域拥堵的一个重要因素。因此,在正确度量管制工作复杂性的基础上,对终端区空域合理划分扇区,可以缓解终端区空域拥堵,提高航班正常率。本文通过研究国内外关于复杂性与空域规划的相关理论,结合我国的航空器实际运行特征,对基于管制工作复杂性
学位
随着民航业的快速发展,航空运输需求持续增加。由于运输供给不足等因素,航班延误频繁发生,给机场、航空公司和旅客造成了极大困扰。航班在机场运行的过程中容易发生航班延误,尤其是在枢纽机场发生的航班延误,更容易在机场网络中传播。航班延误的发生及传播受多种因素的影响,传统的航班延误传播模型较难反映其复杂性,且灵活性欠佳。所以,采用更具智能性和适应性的Agent技术来研究航班延误的传播和控制是十分有意义的。本
学位
国家和社会的发展进步离不开发达的综合交通运输及其基础设施的支撑,尤其是具有高效优势的民航业的发展。国家发改委、中国民用航空局相继提出的发展要求和相关政策文件都明确表示我国将要建设世界级机场群,尤其是京津冀、长三角及粤港澳三大世界级机场群,这标志着我国的民航发展已经逐渐从单一、功能性导向时代过渡到以机场群为核心的区域化协同发展阶段,以各个区域机场群为载体发展社会政治经济等对提高我国的综合实力和国际竞
学位
停机位资源是机场航班运行过程中的关键资源,而航班延误的频繁发生导致航空器常常无法按照既定时刻表完成相应航班任务,继而影响停机位预指派方案的正常运行。本文针对航班延误对停机位运行产生的影响,对航班延误情境下的停机位再指派问题进行研究。本论文以我国某大型运输机场为例,对其航班运行数据进行分析,探究各运行要素与该机场航班延误数量及航班延误时间的相关关系,在此基础上就进港航班与离港航班分别构建基于随机森林
学位
日益增长的航空交通流量和场面容量之间的矛盾逐渐加剧,容流失衡导致频繁的航班延误和场面拥堵等问题,目前采用的人工调度难以满足机场场面的运行要求。在机场现有资源的基础上,采用科学调度策略和借助计算机仿真技术方法解决延误情景下的离场航空器场面滑行道调度问题,对机场场面资源进行优化调配,是减少拥堵与延误、保障场面流畅运行、提高场面运行效率的有效途径,具有重大的理论研究价值。本文重点研究了面对机场不同延误程
学位
机场作为航空运输系统的子系统之一,在客货运输中发挥着重要作用,促进了所在城市快速发展。为保障“一带一路”倡议、京津冀协同发展和长江经济带战略的实施,国家提出建设三大世界级机场群。然而我国机场的发展仍面临着基础设施资源冗余、产出能力不足、机场群内市场重叠率高、竞争激烈等诸多问题,导致机场效率不高、机场群协同发展水平有待提高。研究机场群内各机场效率及机场群整体效率对航空运输及区域经济、社会的发展具有重
学位
目标跟踪是计算机视觉中最重要的研究课题之一。目标跟踪存在诸多挑战,而遮挡是主要的挑战之一。因为目标遮挡使得响应图存在多峰值,所以会导致跟踪的不稳定。对于目标遮挡的准确判断会对滤波器的更新产生重要的影响。以往的目标跟踪算法大多采用多尺度的策略预测目标的尺度,未能充分考虑目标的高级特征。本文基于响应图的多峰值提出响应图质量评价函数解决目标遮挡时的不稳定跟踪问题,采用重叠最大化目标框估计深度神经网络解决
学位
当前的民用航空业飞速发展,保证其发动机的正常可靠工作,在全寿命周期内最大化利用发动机的价值,获得最佳经济收益是发展中至关重要的一步。在发动机健康管理(EHM)的理论实践中,发动机的状态监测,剩余寿命预测以及维修决策有至关重要的作用,本文针对目前研究的内容,提出三方面的改进。首先,针对目前民用航空器发动机的实时监测问题,在发动机滑油磨粒图像的基础上,研究其在多目视觉下的图像表现形式,并结合深度学习的
由于民航运输业受全球经济、地缘政治与突发事件等因素的影响,具有不确定性与波动性,航空公司会根据市场变化调整投资策略以提高盈利或减少损失。航空公司在对飞机投资决策时,虽然会采用净现值法与直接运行成本法等评估飞机投资决策的价值,但该类方法无法评估投资决策中蕴含的管理灵活性价值,而实物期权法能够弥补净现值法与直接运行成本法的不足。本论文从航空公司运营管理的角度,着力研究不确定性与波动性环境下,实物期权理
学位