单目视频中的三维人体运动跟踪

来源 :中国科学院研究生院 中国科学院大学 | 被引量 : 0次 | 上传用户:aulxbdmmydb
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
从视频中跟踪三维人体运动在智能人机交互、视频监控、影视动漫、医疗康复等领域有着重要的应用,是计算机视觉领域的一个研究热点。由于人体运动比较复杂,视频信息不充分并且包含大量的噪声,因此,如何鲁棒的从视频中估计人体的三维运动是一个具有挑战性的课题。   本文研究单目视频中的三维人体运动跟踪问题。该问题的本质是根据图像信息在高维姿态空间(三维人体姿态往往包含30~50个自由度,因此姿态空间维度很高)中搜索。本文把这种搜索看作是一个优化问题,即通过最小化一个目标函数得到姿态的估计,该目标函数表示了人体姿态与观测图像之间的某种匹配程度。由于图像信息不充分并且存在大量噪声、人体姿态维数很高,这个目标函数往往存在大量局部极小点,传统的基于梯度下降的优化方法一般很难凑效,因此,本文采用随机搜索的方法优化姿态。我们用粒子滤波作为随机搜索的基本工具。粒子滤波用带权值的粒子(即姿态)集合表示姿态的分布,从后验分布中可以得到对姿态的估计。粒子滤波提供了一个基本的运动跟踪框架,它包含两个主要组成部分,即粒子似然函数和重要性采样函数,前者用于评价粒子与图像的匹配程度,后者用于对粒子进行传播和扩散。本文以步态运动跟踪为实例,对这两个函数进行了研究,取得了以下成果:   (1)提出了一种基于图像约束的粒子筛选策略   粒子滤波方法中,粒子是根据重要性采样函数生成的,通常没有反映图像信息,因此得到的粒子中有相当大的一部分与图像存在明显不匹配现象,比如粒子对应姿态的投影超出了图像中人体轮廓的范围等等。如果对这种粒子进行评价,既浪费了计算资源,又会给姿态估计的结果带来较大的误差。为此,本文提出了一种基于图像约束的粒子筛选策略,由两个简单的筛选准则构成,这些准则可以通过样本估计出来,它们的计算复杂度比粒子评价的复杂度低。这个筛选策略与基于底层视觉特征的似然函数相结合,得到了一个层次化的粒子似然函数。在该函数的顶层,通过筛选准则剔除那些不满足约束的粒子,这样得到的粒子集合都符合图像约束。通过筛选的粒子进入似然函数的底层做进一步的评价。本文的似然函数避免了不必要的粒子评价,也减少了错误粒子对跟踪结果的干扰。实验表明该方法简单有效。   (2)提出了一种基于局部动态模型的运动跟踪方法   粒子滤波跟踪通常用运动的动态模型作为重要性采样函数。本文分析了步态运动的动态模型,发现在姿态空间的不同区域,人体姿态的变化具有不同的规律,具体表现为姿态各个自由度的加速度协方差是随时间改变的。采用固定的协方差对粒子进行扩散往往会使得粒子的分布与姿态的真实分布偏差较大,导致姿态估计的误差较大。针对这个问题,本文提出了一种基于局部动态模型的粒子滤波跟踪方法。我们在跟踪过程中从运动库检索出与前一帧姿态相似的姿态,构成一个局部区域,在这个局部区域估计动态模型。由于这个小区域内的姿态具有非常相近的动态特性,因而用这些姿态训练的动态模型可以很好的刻画该区域内的人体运动规律,使得粒子散布在姿态后验分布密度较大的区域。实验表明该方法有效的提高了运动跟踪的效果。   (3)提出了一种周期性运动的参数化描述方法-运动曲线模型,并用于粒子采样   在粒子滤波中,动态模型不能表示姿态的分布,因而不能约束粒子的分布区域。当粒子分散在姿态分布密度较低的区域,通过粒子滤波得到的姿态就会出现较大的误差,甚至是错误的。针对该问题,我们研究了描述低维姿态空间分布结构的方法,提出了一种周期性运动的参数化模型-运动曲线模型,该模型把周期性运动表示为低维空间中的参数化曲线,包括均值曲线和方差曲线。均值曲线是一个以时间为自变量的函数,通过改变输入可以得到不同时刻的人体姿态。为了刻画同一时刻人体姿态的差异,我们在这个曲线上建立了一个概率分布模型,这个模型用任意时刻的姿态方差来表示该时刻姿态的分布特征,我们把这个方差也表示为以时间为参数的曲线(方差曲线),这样可以刻画不同时刻人体姿态的不同分布特点。这两个曲线构成了人体运动的运动曲线模型,它描述了周期性人体运动的空间分布特征。我们把这个模型用于粒子滤波跟踪。实验表明该方法很好的约束了粒子分布,有效的提高了跟踪精度。
其他文献
分子影像是一门新兴的前沿综合交叉学科,是美国哈佛大学Weissleder等人于1999年提出的。利用分子探针技术,它可以在细胞、分子水平实现生物体生理、病理变化的实时、无创、动态
近几十年来,磁盘性能的发展远远落后于CPU、内存的发展,其随机访问的性能也远低于顺序访问,同时随着集中式存储的广泛应用,如何提高应用的并发写性能逐渐成为一个突出的问题。另
随着医院信息化建设水平的不断提高,临床信息系统建设受到医院的重视。临床信息系统始终坚持“以患者为中心”的理念,避免繁琐的流程,提高医务工作者的工作效率,最终实现提高
随着数据量的增加和元数据操作性能需求的提高,传统基于DRAM+HDD存储架构的机群文件系统元数据存储系统面临挑战。由于HDD的I/O时延过高,HDD已经成为元数据存储系统的性能瓶颈
近年来,物联网产业方兴未艾,而无线传感器网络的研究也为物联网的发展注入了一针强心剂。无线传感器网络有着巨大的发展潜力,尤其是在物联网产业蓬勃发展的今天。将无线传感器网
近些年,随着计算机技术以及网络技术的快速发展,图像与视频等多媒体的应用越来越广泛,其版权保护认证问题逐渐成为普遍关注的问题;可逆数字水印以其独特的可逆特性作为版权保
随着石油物探数据采集量的高速增长,石油物探数据处理的I/O性能逐渐成为系统的瓶颈。由于当前行业内主要使用NFS(Network File System)文件系统来存储数据,所以NFS服务器的性能
火焰动画是以计算机技术为核心,结合相关科学知识,重现自然界中的火焰现象,同时加以一定的艺术创作,生成用户满意的视觉效果。经过多年的发展,火焰动画生成技术已广泛应用于虚拟现
目前,虚拟化技术正在高速发展,该技术已在服务器整合、集群计算、配置多操作系统以及内核开发等很多领域得到广泛应用,并且虚拟化技术已经向个人计算机方向发展。而个人计算机的
随着半导体工艺技术的进步,面向多核和众核处理器的设计方法逐渐成为学术界和工业界研究热点。然而,由于众核处理器芯片结构复杂,编程环境复杂,同时应用程序的优化策略相互影响,因