【摘 要】
:
手部姿态估计作为人机交互中的一个关键技术广泛应用于各个领域,特别是在虚拟现实和增强现实的一些应用中,可以使用户的体验得到改善,实现人手与虚拟物体的直接交互。近年来,随着人工智能技术的快速发展,目前采集三维数据的设备也得到了快速发展。但是,由于三维手部姿态的维度高,手部方向的变化大,手指之间的高自相性和自遮挡,使得估计结果存在精度低,鲁棒性差的问题。所以本文采取将深度图转为点云表示作为输入,并构造点
论文部分内容阅读
手部姿态估计作为人机交互中的一个关键技术广泛应用于各个领域,特别是在虚拟现实和增强现实的一些应用中,可以使用户的体验得到改善,实现人手与虚拟物体的直接交互。近年来,随着人工智能技术的快速发展,目前采集三维数据的设备也得到了快速发展。但是,由于三维手部姿态的维度高,手部方向的变化大,手指之间的高自相性和自遮挡,使得估计结果存在精度低,鲁棒性差的问题。所以本文采取将深度图转为点云表示作为输入,并构造点云深度神经网络,通过此方式学习点云特征进行三维手部姿态估计任务,通过此方法能够使深度图中的三维信息得到充分地利用,同时也避免了数据过于冗杂。首先,本文通过对PointNet网络与分层的PointNet网络结构和原理的研究,使用了一种基于分层PointNet网络的手部姿态估计方法。首先介绍了数据集,以及数据预处理的过程。着重介绍了手部区域的锁定和三层特征提取层的分层PointNet网络。其次,为了进一步提高手部姿态估计的精度,本文采取将分层的PointNet网络结合点注意变换器,构成的新网络来做手部姿态估计任务,因此本文提出结合点注意变换器的手部姿态估计方法。由于手部关节间具有的独立性与相关性,点注意变换器的作用就是将关节点间的关系作为特征输入,使得手部姿态估计精度能进一步提高。同时,本文还采用耿贝尔采样法(GSS)替代最远点采样(FPS)来进行下采样。最后,本文用上述两种方法分别做了实验并与其他手部姿态估计方法作了比较。本文在CVPR2015_MSRA数据集上进行了验证,通过实验结果表明,基于分层PointNet网络的手部姿态估计方法比大部分方法估计精度方面要好,而结合点注意变换器的手部姿态估计方法虽然在最后的平均估计精度方面优于前者,但在指尖位置关节点的估计精度略逊于基于分层PointNet网络。
其他文献
目的:探索宫颈鳞状细胞癌患者癌症组织PRKD2的表达水平在患者新辅助化疗疗效及预后评估中的意义。方法:本文回顾性分析2015年1月至2018年12月在武汉市中心医院妇产科及同济医院妇产科就诊的34例宫颈鳞癌患者临床资料,依据WHO实体瘤评价标准将接受新辅助化疗的患者分为敏感组(24例)和耐药组(10例),应用免疫组化检测两组患者癌症组织中的PRKD2表达水平,比较其与新辅助化疗效果及临床因素之间的
高通量单细胞RNA测序是从单细胞水平检测基因表达用于研究细胞异质性的技术,包括自动化单细胞测序和高通量数据分析。前者首先基于“油包水”乳液技术和微流控技术实现了高通量的单细胞分离和带有细胞条形码的单细胞测序文库制备的自动化;然后基于第二代测序技术采用模块化设计的机械固件和高度自动化的操作流程,实现高通量测序。后者是指面对由于自动化技术的应用提高了实验数据的信息密度和容量而产生的海量数据,需要依靠实
目的:本课题重在研究维持性血液透析患者居家血压变异性与认知功能的关系。方法:选取2019年12月1日至2020年8月31日于武汉市第四医院血液透析室接受维持性血液透析的患者为研究对象。收集患者1周内非透析日家庭自测血压,计算其血压变异系数。同时收集患者临床基线资料。所有研究对象的认知功能状态均通过蒙特利尔认知评估量表(Montreal Cognitive Assessment,Mo CA)进行评估
帕金森病是一种常见的神经退行性疾病,死亡率低但致残率高。伴随着年龄的增长患病率也逐渐增高,患者症状会随着病程的发展愈发严重,对患者的身心健康及生活质量都会带来严重的影响。根据多年医学研究,表情缺失被认为是帕金森病患者的常见症状之一,俗称“面具脸”症状。目前,临床上专业医师会利用评估量表中面部表情的评价来判断病人表情障碍是否存在以及其严重程度,主观性较强。寻找一种客观评价帕金森病面部症状的方法,也成
随着我国经济社会的不断发展和人民对美好生活的不断向往,人们对自身的健康状况也越来越重视。针对人体行为分析、姿态检测的设备及软件平台已经从研究阶段逐步走向了应用市场。关节活动度是临床康复医学中常见的检测项目,可作为术后恢复、伤残鉴定等领域的重要评价指标。目前临床上普遍使用人工测量工具即量角器来测量人体关节活动度,这种方法虽然简单,但效率低,浪费大量人力资源,且测量结果存在一定的主观性。为了解决传统人
目的:比较天玑骨科手术机器人辅助导航与传统中空螺钉内固定治疗股骨颈骨折的早期疗效。方法:回顾性分析2018年9月至2020年9月我院收治的行中空螺钉内固定术治疗的股骨颈骨折患者的各项资料,根据是否使用天玑骨科手术机器人辅助导航置钉分为实验组和对照组,实验组行天玑骨科手术机器人辅助导航下股骨颈骨折闭合复位中空螺钉内固定术,对照组行人工股骨颈骨折闭合复位中空螺钉内固定术。收集实验组及对照组病例的以下数
视觉上的显著性是由场景的区域来定义的,这些区域从周围的区域中脱颖而出,能够立即吸引人们的注意,使生物能够将有限的知觉和认知资源集中在最相关的可用感官数据子集上,从而促进学习和生存。相对于传统的三维扫描技术和体素化方法而言,点云是由许多3D数据采集设备的原始输出组成,是计算机视觉应用的重要3D数据表示。在实际应用中,如在三维点云对象的分类或分割之前,通常需要对它进行预处理,本文首先对同一点云模型进行
单细胞分析可获得细胞群体中个体差异化信息,近年来已成为生命分析领域重要的研究方向之一。基于电感耦合等离子体质谱(ICP-MS)的分析方法为单细胞元素分析提供了有力工具,在生命科学、药学和环境科学研究中应用潜力巨大。本论文拟将微型化、易于自动化、便携性高的微流控芯片与高灵敏的元素特异性检测器ICP-MS相结合,建立一个分析快速、高灵敏、高通量的微流控芯片-ICP-MS单细胞元素分析平台。在此基础上,
响应面法是统计学与数学结合的产物,适用于多因素影响的目标优化,广泛应用于工艺流程、产品设计的优化。响应面法通过对小范围建立的响应面模型用一阶或二阶多项式进行拟合、绘制响应曲面图和等高线图,分析各因素对目标响应的具体影响。遗传算法是一种模拟自然选择机制的进化算法,常用于多目标优化问题。氯化石蜡在自然环境中广泛存在,由于氯化石蜡同类物众多,检测难度较高。本文采用响应面法优化大体积进样参数,并建立响应面