基于单目RGB图像的实时6D姿态估计研究

来源 :重庆大学 | 被引量 : 0次 | 上传用户:aini826611
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
6D姿态估计作为增强现实,自动驾驶,机器人抓取等领域的关键技术之一,是一项极具挑战性而又基础的任务。现存的方法大多依赖于深度图像或迭代调优来追求先进的结果。然而,深度图像的获取成本高,迭代调优过程严重影响模型实时性。本文研究在不需要任何迭代调优过程的条件下,利用单目RGB图像进行实时的高精度的6D姿态估计。基于向量场表示的姿态估计方法能自然地解决目标遮挡问题并实现最先进的性能。该类方法利用不可微分的霍夫投票策略定位2D关键点,导致训练过程中忽略了关键点与像素点之间的距离对定位精度造成的严重影响。本文提出先验距离增强损失(Prior Distance Augmented Loss,PDAL)来提升向量场表示的质量和关键点定位的精度。CNN通常采用通道联合或矩阵求和的方式,实现浅层外观特征和深层语义信息的互补,这可能限制模型的表征潜力。因为浅层特征图包含大量具有干扰性的背景信息,深层次特征图嵌入的语义信息对多任务学习的重要性也不同。本文提出一个轻量级的自适应融合注意力模块(Adaptive Fusion Attention Module,AFAM)来实现精细的多层次特征融合。利用PDAL和AFAM,本文构建一个基于自适应融合的先验距离增强网络(Adaptive Fusion Prior Distance Augmented Network,AF-PDANet)来完成姿态估计任务。现有基于对应关系的方法难以实现联合训练,限制了姿态估计的潜力,而没深度图像的支撑下,基于整体预测方法的性能不佳。本文基于向量场表示实现一个可联合训练的基于空间概率分布的姿态估计网络(Spatial Probability Distribution Pose Estimation Network,SPD-PENet)。其针对AF-PDANet的改进主要包括两个可微分组件:利用向量场表示定位关键点的空间概率分布层(Spatial Probability Distribution Layer,SPDLayer);基于隐式微分实现Pn P几何寻优的不确定性驱动BPn P(Uncertainty-driven Backpropagating Pn P,UD-BPn P)。SPD-PENet能充分发挥方向向量表示处理目标遮挡的能力和联合训练的优势。为了验证上述方法的有效性和实时性,本文在LINEMOD,OCCLUSION和YCB-Video等数据集上分别进行了广泛的实验。实验结果表明,本文的方法能获得显著的性能收益和先进的结果,并且在处理目标遮挡时更具鲁棒性。此外,本文的方法完全能满足实时性任务的要求。
其他文献
报纸
中国农业的发展居世界前列,农产品物种丰富,促进农业经济的发展,对提高国家经济实力具有重要作用。在乡村振兴战略背景下,农产品电商随着互联网技术的发展逐渐成为一种新型的模式,文章通过分析农产品电商的意义,剖析农产品电商发展目前的困境,探索改善农产品电商发展困境的对策,提高农产品产业的发展,促进攻坚脱贫工作的进行。
期刊
在光学非接触测量技术中,光栅投影三维测量技术具备精度高,测量速度快、单次测量数据量大等优点。目前,在国内航空、航天、汽车等制造领域,对复杂结构参数的测量大部分使用的是光栅投影三维扫描测量技术。高精度的光栅投影三维扫描设备多为国外进口产品,国内相关产品的测量准确度相对较差。开展高精度光栅投影三维测量设备的关键技术研究,可以提高国内光栅投影测量技术的自主可控能力,更好的服务于高端制造领域。本论文将通过
学位
组合动力飞行器上升阶段轨迹规划和制导是其执行航天任务的关键。其在大气层内飞行时间长,动压变化剧烈、气动系数散布大,发动机性能与飞行高度、速度存在紧耦合,工作模态多且各模态之间的性能差异大。为实现组合动力飞行器上升阶段高效、高可靠飞行,在保证飞行剖面满足不同阶段过程约束和终端约束同时,确保组合动力发动机工作效能达到最佳状态;在实现高制导精度的同时,具备强鲁棒性。本文针对预冷组合动力飞行器上升段轨迹规
学位
频率合成器是无线通信中射频前端的核心器件,主要功能为通信系统提供低相位噪声、低杂散的本振或者低抖动的时钟信号。高精度的基准频率在通信领域的迅猛发展下需求越来越高。锁相环频率合成器采用锁相环方式实现频率合成,其工作频带宽、相位噪声低、功耗低且易于集成,是目前最常用的频率合成技术。其中小数分频方式可以使锁相环频率合成器在采用较高的参考频率的同时拥有较高的环路带宽,得到了广泛的应用。但小数锁相环实现高频
学位
<正>在国际贸易规则“绿化”发展趋势愈发明显的背景下,我国应密切跟踪关注美欧等大国低碳贸易规则进展,积极主动参与国际气变规则制定。同时,加快国内碳市场建设,适时征收碳税,为设置有利于我国的低碳贸易规则议题做好准备。
期刊
现代战争越来越趋于信息战,作为精确制导武器的导弹而言无疑具有强大的威慑力,其具有的超视距攻击、精确打击等特点使得战场环境越发复杂。对于高超声速导弹而言,其导引头多采用主被动复合制导的方式,在巡航阶段其主动导引头保持关机状态仅采用被动制导,在末端时采用主动制导从而锁定目标并发动攻击。在导弹高速飞行时,其与空气摩擦产生高温涡流,导引头天线罩内外表面存在温度差,高温还能导致罩体结构出现热烧蚀现象,这些因
学位
数据转换器作为连接模拟信号域与数字信号域的桥梁,在电子系统中扮演着非常重要的角色。其中,模数转换器用于实现对模拟信号的采样,并将其转换为数字信号,以便进行数据存储和处理,其分辨率、采样速率和能量效率等性能参数经常受到关注。近年来,随着航空工业、医疗影像设备等的快速发展,电子系统在这些场合的应用对高精度、大动态范围模数转换器提出了迫切需求。在各种架构类型的模数转换器中,由电容型数模转换电路、比较器和
学位
横腭杆是一种在正畸临床中应用广泛的固定矫治器的辅助装置。本文就横腭杆在正畸临床中的应用及其力学机制进行综述,为临床医师提供参考。与传统观念不同,单独使用横腭杆并不能有效加强支抗,将其与其他传统支抗加强装置联合使用可以在某些情况下提供充足的支抗。同时,横腭杆可以辅助唇侧固定矫治维持牙弓宽度,辅助排齐牙列,纠正不良习惯,使矫治效率得以提高,副作用减少。用作主动矫治装置时,横腭杆可以使单侧或双侧磨牙在三
期刊
在建设工程市场环境中,经常会遇到投标不完善的情况,给整个建筑行业的发展造成了严重的影响。文章全面分析了建设工程市场投标经营的具体情况,找到问题之所在,深入研究了今后建设工程投标的特点,并提出了合理的投标经营决策意见,为今后同类型工程投标提供信息参考。
期刊