基于深度学习的人体手部姿态估计

来源 :电子科技大学 | 被引量 : 0次 | 上传用户:hrz2009
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
手部姿态估计是计算机视觉领域的重要研究课题,其研究内容是从给定的输入图像或视频数据中估计出手部关键点的三维空间坐标。人体手部姿态估计有着非常丰富的应用场景,例如手语分析、计算机辅助康复病人训练、人类手部运动分析、人机交互和电影游戏等方面。近年来基于卷积神经网络深度学习方法使手部姿态估计的准确性有了显著的提高。然而,深度学习模型比传统模型的参数量更大,算法复杂度更高,因此,需要大量的带标注数据来训练卷积神经网络。由于人体手部相对整个图像较小、手势的复杂性较高、自遮挡等问题,使精确的手部姿态估计较为困难。此外,大规模训练数据中精确三维标注的获取十分困难,成本高昂且费时费力,极大束缚了相应模型的开发。因此,亟需研究高性能、低标注成本的三维手部姿态估计方法。本文针对以上问题,做了以下研究:(1)在数据预处理方法上,针对传统方法背景去除不干净和裁剪不准确问题,提出了一种改进Hand Augment网络的预处理方法。通过在四种数据集上的测试,能够得到高质量的预处理结果,验证了方法可行性和有效性。(2)研究了全监督条件下精确的二维和三维手部姿态估计模型。进行二维估计的主要目的是探究手部姿态特征提取器的骨架模型。全监督的三维估计旨在确定一个高精度的三维手部姿态估计的模型,为半监督研究提供可靠的基础网络。(3)针对数据依赖高和标注成本高昂的问题,提出了一种半监督三维手部姿态估计方法,使用多视角一致性约束和多任务约束相结合的策略。多视角约束是指将输入图片进行一定的变换后,将原图和变换后的图像一起输入网络,使变换后的图片的结果经过逆变换与原图的结果保持一致。多任务约束是指将基于检测的任务和基于回归的任务相结合,使提出的模型具有两者的特点,使模型可以实现端到端的训练。同时,还加入了基于视角约束的直接坐标损失函数和加权特征图的损失函数。提出的方法在四种不同场景的大规模公开的数据集(NYU、ICVL、MSRA和HANDS 2017数据集)上进行了实验验证,验证了方法的有效性。
其他文献
在国有企业的三供一业操作当中,属于当下企业的改革重要举措,和人民群众生活稳定和社会的长治久安具有密切的关系,甚至于在企业发展的前途和命运方面也具备直接的关系,因此国家的相关部门以及财政部门都出台了对应的规范和指导。在国企企业的三供一业操作过程当中,在各种因素的影响下会出现资产的转移的风险,其中涉及到了纳税问题,基于此,需要对企业的三供一业操作当中关于资产划转过程当中产生的涉税风险以及问题来做出分析
会议
针对太原市铁北小区原有采暖系统存在问题进行重新设计,在系统上增设了自控平衡系统及分户装置,运行期间分别以流量、回水温度和室温为依据,通过自控平衡系统对二次网进行初调节及精调节,合理分配二次网管线流量,维持每个单元回水温度基本一致,减小用户室温差异,从而实现整个小区热量平衡。
期刊
蛇形机械臂具备自由度高,结构细长等特性,能够灵活穿越难以到达的狭窄深腔环境,进行探测、维修、制造等工作,在航空制造、核电设备检修维护等领域有着广阔的应用前景。本文针对在狭窄、深腔、恶劣的环境中进行探测、打磨、装配等作业的需求,设计了一款13自由度的绳驱蛇形机械臂,通过对蛇形机械臂进行结构设计、运动学分析、运动规划、柔顺力控制策略研究,利用Simulink和Recurdyn多体系统仿真软件建立相关模
学位
房地产业是我国国民经济的支柱产业,在提高我国财政税收、推动上下游企业发展中起着不容小觑的作用。过去几年来,我国对房地产市场的调控力度只增不减,导致房地产市场越来越集中,企业间的竞争越来越激烈,企业的生存日益艰难。在此环境下,房地产企业想要在逆境中突破,在竞争中持续盈利,必须从自身出发,提升企业内部价值,在市场中稳住根基。目前已有的提升企业价值的方法有很多,但准确评估企业的价值更为重要。但实务界常用
学位
航空发动机作为飞机的动力系统,反映了一个国家的科技水平和国防实力。航空发动机的生产与制造涉及到机械、制造、材料和能源等众多领域。航空发动机的失效往往会造成灾难性的后果,因此进行航空发动机的可靠性与耐久性设计是十分必要的。齿轮作为航空发动机传动系统的主要零部件,往往在极端工况下工作,承受着复杂的交变载荷,其失效会直接导致航空发动机传动系统出现故障,因此需要对齿轮的强度和耐久性进行分析,并提出改善齿轮
学位
报纸
近年来,随着中国的证券市场不断发展和完善以及相关政策对物流行业的支持,物流企业相继上市,企业并购、重组等行为日渐频繁,合理的估值对企业交易行为发挥着重要参考作用,促使企业对价值评估的需求不断增长。因为合理的企业价值不仅能够反映公司的实际状况和未来盈利能力,还有利于投资者对企业投资做出判断,为管理和决策者提供较好的参考依据。在物流企业价值评估研究中,大多数学者采用收益法或者成本法,很少使用市场法。但
学位
近两年,随着十四五规划的出台和疫情对经济带来的双重影响下,各行各业在新的社会经济大背景下都有所变革,以谋求更好的发展,物流行业更是如此,对于物流企业所面临的机遇和挑战,如何进行有效的价值投资,成为了广大投资者所要探讨的新兴话题,由此引发了对企业价值评估的思考,研究物流企业的价值评估,促进企业经营信息充分流动,有效地为广大投资者和企业管理者提供决策和依据,有利于促进投资收益最大化。在评估的实际操作中
学位
随着并购重组规模的逐渐扩大,上市公司计提巨额商誉减值事件引发了投资者以及利益相关者的广泛关注。商誉由并购交易对价与被并购方的可辨认净资产公允价值确认,在本质上体现企业未来的超额盈利能力,这是并购重组过程中导致商誉资产形成的决定性因素。然而并购过程涉及并购方、被并购方、资产评估机构以及其他利益相关者,出于不同的并购动机对并购交易定价产生影响,在被并购方公允价值没有发生改变的情况下,并购交易对价的改变
学位
以安徽省某国有企业M(以下简称M企业)的“三供一业”(供水、供电、供气、物业管理,以下简称三供一业)分离移交改造工作为例,简述了三供一业工作的基本情况。针对工作开展过程中解决问题的方式、方法以及其他工作经验进行归纳总结,并结合国有企业实际,探讨三供一业工作经验在其他建设工程项目中的移植和应用。
期刊