基于智能芯片的双目立体视差计算方法研究

来源 :郑州大学 | 被引量 : 0次 | 上传用户:shijunfengmm
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
双目立体视差技术模仿人类双眼,利用场景在左右相机成像的水平差异计算视差、感知距离,进而可以获取三维场景信息,是计算机视觉领域的重要研究方向之一。双目立体视差技术已广泛应用于三维测距、三维重建、自主导航、虚拟现实等领域,具有重要的研究价值和应用价值。现今双目视差相关应用部署在移动及嵌入式设备上的需求日益增多,然而现有基于深度学习的视差计算方法通常需要较高的计算成本而无法满足移动端应用场景的需求。因此,研究高效的视差计算方法,并实现在智能芯片上的应用具有重要的意义。归纳本文的主要创新点和成果,有以下三点:(1)提出了一种逐渐求精的多阶段级联视差计算方法现有较为先进的视差计算方法大多是基于深度学习的算法,虽然可以获得高精度的预测视差图,但通常存在计算量较大、运行时间较长以及网络规模较大等问题。针对上述不足,本文提出了一种多阶段级联视差计算方法,在尺度由小到大的特征图上以级联的方式构建代价体,逐步缩小视差搜索范围,减小代价体的大小,从而降低参数量、减少运行时间,实现由粗到精的多阶段高效视差计算。实验显示视差算法参数量为0.29M,KITTI数据集上运行时间为0.023s,小于多数现有先进方法的1/10,最后一阶段预测视差图的误差可达2.93%,与现有先进方法接近,证明多阶段级联视差算法能够在保持视差预测精度的同时显著降低网络参数量和计算量、提高运行效率。(2)提出了一种基于深度可分离卷积的轻量级视差计算网络针对面向移动和嵌入式设备应用的深度学习神经网络需要满足的低成本、低功耗等要求,研究视差计算网络的轻量化改进方法。基于对深度可分离卷积与标准卷积相比可以有效降低参数量和计算量的分析,将深度可分离卷积应用于多阶段级联视差计算网络,提出了基于深度可分离卷积的轻量级的视差计算网络。实验显示轻量级视差计算网络的参数量为0.18M,约为多阶段级联视差计算方法参数量的2/3,进一步降低了参数量和计算量,为下一步在智能芯片上的部署和应用做好了准备。(3)实现了视差计算网络在智能芯片上的部署和应用将基于深度可分离卷积的轻量级视差网络部署在用于移动和嵌入式设备的智能芯片Jetson AGX Xavier上,实验显示其视差计算速率约为50帧每秒,实现了智能芯片上低成本、低功耗的高效视差计算,可以满足视差计算在移动和嵌入式等场景的应用需求。
其他文献
学位
目的构建体外苯并[a]芘(B(a)P)诱导人支气管上皮细胞(BEAS-2B)恶性转化模型,从代谢组学的层面,探究细胞恶性转化过程中小分子代谢物的动态变化,为筛选肺癌早期生物标志物和寻找简便的早期筛查方法提供新的线索。方法1.使用已知致癌物苯并[a]芘诱导BEAS-2B细胞构建恶性转化模型。以终浓度5μg/ml的B(a)P对BEAS-2B细胞进行干预,设为实验组;以终浓度0.1%的二甲基亚砜(DMS
背景和目的:世界卫生组织正在推广实施全球消除乙型肝炎(乙肝)行动计划,到2030年,乙肝患者治疗覆盖率达到80%;与2015年相比,慢性乙肝(Chronic hepatitis B,CHB)相关疾病发病和死亡数要分别减少90%和65%。要实现这一目标,需要投入大量的公共卫生资源,这对我们来说是严峻的挑战。我国是乙肝负担最重的国家,这与乙肝病毒(Hepatitis B virus,HBV)感染、肝硬
随着复合材料在航空航天、汽车和船舶工业的广泛应用,复合材料与金属的连接问题日益凸显。在复合材料与金属的连接中,混合接头不仅比机械接头、胶接接头具有更高的静态载荷,而且具有更长的疲劳寿命,是现在研究的热点之一。本文采用数值仿真与试验方法,对CFRP层合板和钛合金多钉胶螺混合接头的拉伸性能与疲劳寿命进行研究。重点探究螺栓个数、螺栓排布、搭接宽度等参数对混合接头拉伸和疲劳性能的影响,旨在进一步提升胶螺混
针对传统充填材料高碳排放、高成本的问题,以“绿色矿山”为理念,选用工业固废电石渣、脱硫石膏和矿渣为胶凝组分,以尾矿砂为骨料制备充填材料。利用X射线(XRD)、扫描电镜(SEM)和能谱分析(EDS)等手段研究充填料水化产物及微观形貌,并开展工作性能、力学性能和重金属固化性能试验。研究结果表明:所开发的充填材料凝结时间和流动度均满足矿山充填工程要求,充填体7 d、28 d抗压强度可达4.6 MPa、7
近年来,深度神经网络(DNN)被广泛地应用在各种领域。以DNN为核心的智能终端应用程序要求终端设备具备强大的计算能力,但是目前终端设备由于硬件及能量的限制,即使是使用较小的DNN模型也达不到最优的性能。而传统云计算在响应实时性、传输稳定性以及数据隐私安全性等方面无法满足智能应用程序的需求。为了克服云计算的局限性,边缘计算将具备计算能力的设备部署到网络边缘或数据源头,通过终端设备和边缘设备协作执行D
目的旨在分析人类三磷酸腺苷结合盒转运体G1(Adenosine triphosphate-blinding cassette transporter G1,ABCG1)基因甲基化水平及其动态变化与2型糖尿病(Type 2 diabetes mellitus,T2DM)发病风险的关联,探讨ABCG1基因多态性与T2DM发病风险的关联,探究ABCG1基因甲基化水平、基因多态性与影响T2DM危险的相关代
研究目的:为了探究大学生篮球运动员膝、踝关节的肌力特征,通过对大学生篮球运动员膝、踝关节肌群的等速向心肌力测试,对所得的指标进行统计处理及分析,得出被测试者的发力特点和规律及膝、踝关节周围肌群力量分布特征,便于为大学生篮球运动员更好的进行专业训练及防止下肢关节运动损伤的发生提供可参考的理论依据。研究方法:随机选取郑州大学体育学院公共管理专业大学生和大学生篮球运动员各10名,均为男性。运用CON-T
当前,中小型制造业企业的竞争日益激烈。特别正处于起步发展阶段的中小型制造业企业正面临着前所未遇的挑战和机遇。想要在竞争中脱颖而出,不仅产品质量要过硬,更要有效地控制成本,而与成本核算息息相关的便是企业内部的仓储管理的专业化、精细化。目前很多中小型制造业企业重视生产销售而轻内部管理。本文将以财务的视角探索仓储管理和产品成本核算的重要性。
学位