面向移动端增强现实的三维平面检测算法研究

来源 :北京交通大学 | 被引量 : 0次 | 上传用户:yueer40849263
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着智能手机等移动设备的快速发展,基于移动终端的增强现实技术已成为当前增强现实领域的热点研究问题,三维平面检测作为其关键技术受到广泛关注。由于移动端计算性能有限,其平面检测多采用纹理特征匹配得到,但是无法检测弱纹理的平面,而利用深度学习检测平面本身具有一定的挑战性。因此,本文面向移动端的三维平面检测算法展开了研究,选择了基于U-Net网络实现三维平面检测,并对其网络进行了轻量化设计。之后完成了电脑端到移动端的迁移与量化,并对其进行硬件加速。本文还利用移动端惯性测量单元(Inertial Measurement Unit,IMU)辅助视觉实现了移动端的实时三维平面检测。主要贡献如下:(1)在分析代表性的三维平面检测网络的基础上,提出了一种基于轻量化U-Net网络的三维平面检测方法。通过分析现有三维平面检测网络,选择基于U-Net网络实现三维平面检测。由于移动端计算性能有限,且深度学习网络模型存在冗余,运算速度低。为了优化网络结构,提升计算效率,提出了三维平面检测网络的轻量化方法,包括修改模型卷积方式,减少特征图分辨率和网络通道数等方法。通过实验验证了该网络可以降低网络冗余节点,减少参数量和计算量,提升检测速率。(2)借助Android移动端深度学习框架,设计了三维平面检测网络从电脑端到移动端的模型迁移、量化,以及硬件加速方案。在实现网络轻量化之后需要对模型进行迁移,使其可以在移动端加载调用。为了更高效的检测平面,本文使用量化工具对模型进行了INT8量化,减少了模型参数量,降低了模型体积大小。另外本文还使用移动端硬件加速引擎,包括神经网络应用程序接口(Neural Networks Application Programming Interface,NNAPI)和Hexagon完成了模型加速。实验验证了本文方案可以较好的提升检测速率。(3)针对移动端配置多种传感器的特点,提出了一种IMU辅助视觉的实时三维平面检测方法。由于三维平面检测深度网络的计算速度难以满足移动增强现实应用的实时性要求,因此本文利用移动端IMU数据辅助深度学习网络完成了实时三维平面检测。该方法通过融合IMU数据估算相机在空间中的增量运动,确定相机在时间和空间中的轨迹,辅助基于视觉的三维平面检测。
其他文献
企业是经济发展中的主要力量,企业的发展壮大提供了大量的就业机会和极为丰富的产品,提高民众的生活质量,在国民经济稳增长、促改革、调结构、惠民生、防风险的任务中承担着不可忽视的角色。国家为推动企业健康发展出台了一系列政策措施,包括提供财税金融优惠、改善营商环境、提升公共服务等,“大众创业,万众创新”也深入人心。然而企业的蓬勃发展,带来的经济利益的同时,食品安全、环境保护问题等涉企业犯罪成为不定时炸弹,
改革开放以来,随着中国城镇化进程的不断加速,村落建筑设计同质性越来越明显,相同的建筑风格复制粘贴般地被应用于各乡镇,使得乡村建筑失去其地域特点。村落中的公共建筑作为地域中最具象征性的文化和环境表达的载体,更是以统一的现代面貌冲击着当地居民的传统价值观念,同时消磨着他们的地域认同感和归属感。如何通过公共建筑延续地域文化特性,提升居民的情感认同及文化体验,是设计过程必须要面临与解决的问题。本文以“场所
饮用水污染是导致肠道疾病的主要原因,肠道疾病的发生主要是由水中的病原体所导致。在水样传统检测方法中,以粪源菌检测为主,而忽视其他原虫、病毒类病原体的检测。这种单纯
生物地理屏障一直被认为是生物多样性的驱动因素,通过阻止个体的移动对基因流动形成物理屏障而导致生物的物种分化与多样性的提高。不同生物学习性和生境要求的物种对地理环
上游泵送机械密封是一种流体润滑的非接触式机械密封,其真正实现了介质的零泄露、环境的零污染,是流体机械和动力机械中不可缺少的零部件。密封环上的流体动压密封槽是影响上
环氧改性沥青相较于普通改性沥青而言具有更高的粘度,更大的刚度,更好的抗腐蚀性以及优异的耐久性能等,因而具有极其优异的路用性能。一般运用于钢桥面铺装,机场防滑面层,重
研究长三角地区地表热环境和气温日较差对理解区域和城市气候变化归因、影响和应对均具有重要科学意义和现实应用价值。本文将研究区域选为长三角地区(YRD)的三省一市分为三
财务舞弊一直是资本市场最令人深恶痛绝的现象之一,因此如何建立一个有效的方案来对财务舞弊行为进行预测,具有重要的现实意义。本文正是基于这样的需求下,企图利用神经网络模型以及其它方法来建立一个能有效预测财务舞弊的方案。本文先阐述了财务舞弊的概念以及梳理了国内外关于财务舞弊动机的相关研究,然后又对国内外部分财务舞弊识别模型的研究情况进行概述。随之论述了财务报表各项指标的概念及性质,并从上市公司的盈利能力
随着现代战场信息化以及智能化的走向,无人机在现代化应用中有着举足轻重的地位。在日趋复杂的战场环境中,多无人机协同作战更是成为了军事上不可或缺的作战手段,也是近年来国内外研究的热点和难点。在此背景下,本文针对多无人机协同侦察和对敌防空压制两种典型的任务开展同类无人机任务分配的研究,其结果输出同类无人机的编队组成、编队中各架无人机的起飞次序及其承担的目标任务、无人机携带的燃油量以及由航路点组成的折线航
在全球温室气体排放政策的背景下,隐含在贸易中的温室气体排放可能在影响国家减少污染物排放的责任方面发挥重要作用。本文应用多区域投入产出模型从行业和国家的角度分析了1995年至2011年期间全球贸易隐含温室气体排放的时空变化规律,从而探讨了39个国家贸易隐含温室气体排放的来源和流量的演变特征,并以此为基础测量了基于生产的和基于消费的全球温室气体排放量清单以及进一步深入研究了贸易对国家温室气体排放减排责