基于单目视觉的人体三维姿态估计

来源 :哈尔滨工业大学 | 被引量 : 0次 | 上传用户:ddp100
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着图像传感器技术的发展,基于图像的人体动作分析已成为当前计算机视觉和数据挖掘领域的热门课题。人体三维姿态估计作为后续动作分析和理解的重要前提,通过从图像中估计人体关键点的坐标、旋转角度等参数,对人体在三维空间中的姿态进行重建,在运动分析、虚拟现实、影视制作等领域有着十分可观的应用前景。本文主要研究基于单目视觉的人体三维姿态估计问题,该问题可分为从图像中抽取人体二维位姿和利用二维位置坐标估计三维姿态两个步骤,考虑现有二维人体姿态估计方案已相对成熟,因此本文具体针对已知二维人体位置条件下,人体在空间中深度姿态信息的重建。人体姿态在时间维度上具有较高的连续性和相关性,因此本文首先基于人体二维姿态的时序数据,利用Sequence to Sequence框架和LSTM单元,实现了基于时间序列的人体三维姿态估计模型。之后通过引入注意力机制,以及结合人体关节点的加速度数据特征对模型进行改进,最终在TotalCapture数据集上的平均误差为39.03 mm,预测精度较改进前提升6.3%。实验证明该改进能够有效降低模型的预测误差,并提升模型在人体远端节点上的预测准确度。神经网络模型的鲁棒性严重依赖于训练数据集的规模和覆盖程度,而现有三维标注数据集场景和动作较为单一,因此本文针对人体三维姿态估计的无监督学习方法进行研究。基于生成对抗式网络结构,借助生成器和判别器的竞争和博弈,以及三维姿态和二维成像结果之间的联系,通过对人体三维姿态的估计结果进行结合仰角和平面旋转的随机投影,实现了能够仅使用二维标注数据集训练的无监督模型。同时为了更直观的评估模型效果,本文结合现有二维姿态估计算法,完成了基于单目图像的人体三维姿态估计的模型可视化工作。
其他文献
常温(20~29℃)限氧条件下(DO<0.2mg·mL-1),以城市污水A/O除磷工艺处理出水为原水,在推流式好氧反应器中,考察了城市污水连续流半亚硝化实现维持的内在机制与影响因素,开发了
晚清立宪维新,寻求司法改革,一方面鼓励学生出洋游学,而出现有法科留学生;另一方面开设法政学堂,培养法律人才,使旧官绅学习新法,而成法政学堂法科生,一时,社会争相学习法律,
以明矾生产中产生的废弃物明矾浆为原材料,采用热酸改性、热碱改性、焙烧改性和巯基化改性4种方法进行活化处理,得到新型除镉(Cd)吸附剂.同时,考察了Cd2+初始浓度、pH值和吸
本刊讯美国达美航空公司12月11日发表声明说,为提高跨大西洋空运市场份额,将以3.6亿美元收购英国维珍大西洋航空公司49%的股权。尽管由于市场竞争激烈和燃油价格上升,维珍航
“百年大计,教育为本”。教育为国家的兴旺发达提供了不竭动力。教育的质量很大程度上由教师的质量所决定。同时,教师的质量很大程度上由教师教育所决定。在教师教育的过程中
清人沈德潜在《说诗晬语》中提出,“诗至于宋,性情渐隐,声色大开,诗运一转关也”,认为南朝诗歌对于艺术形式的注重、追求始于刘宋时期,学术界多同意这种观点。南朝刘宋诗歌“
农村生活污水处理设施示范推广中,对技术方案进行定量优选评价有助于提高决策的科学性.为此,本文建立了一个考虑了技术经济性、有效性和适宜性的农村生活污水处理技术评价指
油脂酵母属是重要的产油脂微生物,而目前尚未见到关于我国分离鉴定该属野生酵母菌株的报道。本文通过建立油脂酵母属酵母菌定向分离方法,对海南岛岛土壤中的油脂酵母属酵母菌
在大田高产条件下,研究了氮素营养水平对小麦旗叶衰老过程中蛋白质和核酸代谢变化的影响,并探讨了蛋白质和核酸代谢的关系.结果表明,小麦旗叶衰老过程中可溶性蛋白质含量、DN
<正>在初中历史课堂教学中,多媒体教学图文并茂,能有效地渲染课堂气氛,更好地激发学生学习历史的兴趣,强化学生的记忆、陶冶学生的情操,对于提高历史课堂教学质量大有裨益。
会议