基于深度图像的3D人体姿态估计研究

来源 :北京工业大学 | 被引量 : 2次 | 上传用户:rlhRLH
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
基于图像的人体姿态估计是计算机视觉领域的一大重要研究热点,其主要目标在于获得给定图像中人体各部位在图像中相对位置信息的过程,可广泛应用于视频监控、行为识别和人机交互等多方面领域。根据使用图像不同,可分为基于彩色图像和深度图像两大领域。其中深度图像记录的是目标到相机之间的距离信息,因而具有颜色无关性,不受光照变化等环境因素干扰,并且在保护隐私等方面也具有彩色图像不可替代的优点。但由于受深度图像姿态较为单一以及估计算法性能约束等方面的影响,目前在对深度图像的3D人体姿态估计仍是目前的研究难点及热点。本文为完成对深度图像的3D人体姿态估计,基于现有算法,在传统随机森林方法和基于深度学习卷积神经网络方法两大领域分别进行研究,其中在基于传统随机森林的姿态估计领域中,受训练样本研究条件等限制,本文仅对人体的上肢姿态估计方法进行研究;而对于深度学习的姿态估计而言,由于不存在上述研究限制,因而对整个人体的姿态估计方法进行研究。具体研究如下:1、为解决基于随机森林的3D人体姿态估计算法容易出现的误分类问题,提出一种基于自适应融合特征提取和误分类处理机制的改进算法。该算法利用自适应融合特征提取方法提取深度融合特征,此特征可表达图像距离信息和部位尺寸信息,增强了特征的表征能力;针对识别部位误分类问题,分别从识别部位误分点聚集情况和迭代整合思想出发,提出误分类处理机制,改善部位识别结果;最后提出可进一步处理误分点的改进主方向分析算法,自适应计算出部位主方向向量,实现对深度图像的3D上肢人体姿态估计。2、在基于深度学习方法的3D姿态估计中,首先针对提供3D标签的深度图像的3D姿态估计研究,本文提出一个基于沙漏网络结构的姿态估计方法。该方法网络结构由2D回归模块和深度模块搭建而成,可通过强监督学习技术,以端到端的训练模式,来完成对深度图像3D回归模型的训练,从而实现对深度图像的3D人体姿态估计。3、随后是针对深度图像缺乏深度标签,以及因姿态单一造成的模型泛化能力不高的问题,在上述网络结构基础上,创新性地提出一个基于多源图像弱监督学习的3D人体姿态估计方法,此方法主要包括以下几点,(1)使用多源图像融合训练的方法,提高模型的泛化能力;(2)基于弱监督学习技术,解决缺乏标签的问题;(3)为提高姿态估计结果,改善了残差模块设计。从而最终实现的对深度图像的3D人体姿态估计。
其他文献
随着互联网和光通信技术的发展,全球光通信市场的竞争越来越激烈,如何降低成本、提高生产效率成为光器件和光模块厂商考虑的重要问题。传统的同轴器件封装工艺复杂、物料多,
用户的点击和浏览行为记录在Web网站日志中,挖掘Web网站日志,分析用户的行为,进而优化电子商务网站,是近些年的研究热点。用户行为分析通常包含访问偏好分析、转化率分析等等,业界有大量的访问偏好分析的研究,并将其应用于个性化推荐领域,但针对转化率分析和网站信息结构分析的研究较少,本文设计和实现的用户行为分析系统侧重这两个方面的研究,并解决了大型电子商务网站大规模日志处理的可扩展性问题。本文主要工作包
韦应物是唐大历时期杰出而独特的诗人,白居易、苏轼、严羽、胡应麟、许学夷等著名评论家对其人其诗有许多经典的评论。到了清代,议论之风大盛,诗话高度发展并进入总结期,诗论
意法半导体(纽约证券交易所:STM)日前发布了世界上第一个支持H.264/AVC和VCI高清标准的单芯片机顶盒(STB)解决方案,这些预备标准将会促进下一代优质消费视频系统和服务的发展
随着信息时代的到来,对数据处理的要求越来越高,传统的数字计算机的处理器是以串行方式进行信息处理,在很多情况下并不能满足现在的需要,而人工神经网络是为了模拟人脑神经系
介绍了发泡木塑复合材料的基本原料及发泡方法,同时对发泡木塑复合材料的主要成型工艺及其影响因素进行了说明,在此基础上指出了发泡木塑复合材料的研究趋势。
日本海军在占领印度安达曼群岛之后,为满足日军士兵的性欲,建造了海军“慰安所”。这些“慰安所”均在日军统治当局的严格管理之下,由军医负责对“慰安妇”进行健康检查。本文通
本研究分析了贵阳市立体绿化的作用与意义,探讨贵阳立体绿化发展中存在的瓶颈问题,并从律法政策、科学研究以及组织宣传等角度提出实现立体绿化发展的对策及建议。
针对交直流混联系统中直流保护在交流系统故障时误动的问题,基于某特高压直流系统的数字实时仿真系统(RTDS),研究交流故障下直流系统的暂态响应特征。从交流故障与直流故障的
侧壁式气垫船凭借其航速高,兴波阻力小,操纵性好的优点,已在民事及军事领域得到了广泛的运用。当侧壁式气垫船进行过驳、补给等海上作业时,受海浪的影响不可避免地会产生升沉运动,严重影响船舶间货物补给的安全性,增加人员和货物在转移过程中的危险性。若可以有效地预报出侧壁式气垫船的升沉运动,提前采取适当的控制方案抵消海浪扰动的影响,就能够大幅地降低侧壁式气垫船的升沉运动幅值,保证海上作业的安全。因此,对侧壁式