基于模型的三维人体视频运动跟踪

来源 :中国科学院计算技术研究所 | 被引量 : 0次 | 上传用户:bd235
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
人体视频运动分析是计算机视觉、计算机图形学和图像处理相互融合的一个重要研究方向,其研究核心是从多个同步视频序列中检测、跟踪人体运动,获取人体运动参数,重建人体三维运动姿态,并进一步理解和描述人体运动.三维人体运动跟踪技术的研究可广泛应用于视频监控、体育运动分析、辅助临床医疗诊断、虚拟现实、人体动画、游戏、人机交互等领域.由于存在复杂场景中的运动检测,运动人体的非刚体描述,人体模型三维到二维投影的多义性,人体模型的自遮挡,高维状态空间搜索等方面的困难,如何从视频图像序列中准确恢复人体三维运动姿态始终是计算机视觉和计算机图形图像领域中一项非常有挑战性的任务. 本文的研究内容以国家奥运科技项目为背景,专注于多摄像机环境下的人体运动检测和运动跟踪技术的研究,试图利用计算机图形图像和计算机视觉技术自动恢复人体运动的三维姿态.针对体育运动分析特有的非接触、无妨碍的运动跟踪与仿真的要求,提出了基于多摄像机视频的以三维人体模型为指导的运动跟踪框架.以这个框架为基础,本文构造并实现了一个基于视频的三维人体运动跟踪原型系统VHMTS(Visual 3D Human Motion Tracking System).本文完成的研究工作及主要贡献如下:1)通过组合多种图像特征,实现了一种新的运动物体检测方法.一方面,组合图像的颜色、梯度和纹理特征,利用梯度和纹理信息对亮度变化不敏感的特性,提高运动检测准确性;另一方面,使用图切割算法对物体/背景进行分割,在不影响整体分割结果前提下修正局部判别错误的像素点,分割结果噪声少且稳定性强.2)提出一种局部优化和粒子滤波相结合的概率模型跟踪框架,用于解决多关节人体运动跟踪问题.该框架直接融合多摄像机视频数据,在粒子滤波过程中引入高斯.牛顿(Gauss-Newton)优化方法来减少样本个数.一方面,优化后的样本更加符合真实的姿态分布;另一方面,将优化结果用于指导下一时刻采样函数的生成,提高样本采集的有效性.3)提出一种结合在线表观模型和粒子滤波的运动跟踪方法.现有跟踪方法的有效性严重依赖于运动检测结果的准确性,但在实际应用中很难获得准确的运动人体区域.本文提出一种基于Wander-Stable-Lost(WSL)模型的在线表观模型,结合人体视觉表观和轮廓信息建立跟踪所需的观测似然函数,并使用优化粒子滤波算法求解.实验表明该方法可以在运动检测结果有缺失的情况下有效地完成跟踪.4)设计并实现了一个结合多种图像特征,在多摄像机环境下跟踪人体的三维人体运动跟踪原型系统VHMTS.包括设计了一个参数化的人体骨架模型和人体外观模型,以及提出一种实用的外参定标算法.VHMTS通过定义三维人体模型,摄像机模型,以及观测似然函数得到跟踪所需目标函数,并通过概率模型跟踪框架对人体运动进行准确的跟踪和三维重建,可应用于体育运动分析和动画制作等领域. 5) 设计并实现了一个基于视频的杠铃中心轨迹跟踪与分析系统.系统以普通摄像机拍摄得到的举重运动员的正侧面视频作为输入,通过一种改进的模板匹配算法跟踪杠铃中心轨迹,然后根据得到的杠铃中心位置计算举重运动中关键的技术参数,最后输出包括技术参数和曲线图的技术分析报告.本系统采用普通设备,操作简单,分析结果清楚,能够有效的辅助教练员的日常训练,目前已应用于国家女子举重队实际训练中.
其他文献
作为自然语言处理一个新的研究方向,话题识别与跟踪旨在发展一系列基于事件的信息组织技术,以实现对新闻报道信息流中新话题的自动识别以及对已知话题的动态跟踪.自1997年以
软件生产是一个相当复杂的过程。由于软件过程的复杂多变,我们无法定义一个标准的过程将其应用到各种软件项目中。另一方面,不同的软件项目的过程虽然千差万别,但这些过程中的某
种子是一个特殊的、不可替代的最基本的生产资料,是农业科学技术和各种农业生产资料发挥作用的重要载体,是决定农产品质量和产量的根本内因。 优良的种子是农业增产、增效的
计算机支持的协同工作作为新兴的研究领域,在近几年有很大的发展,且受到广泛的重视,它致力于研究人们在一起的工作方式,通过计算机技术和通信技术的结合,把计算机从传统的孤立的工
随着云计算技术与应用的发展,数据中心遇到新的技术挑战。内存计算等大数据处理应用,使得数据中心对内存的需求量进一步增加,单节点内存容量不足的问题更加严重。数据中心应用具
随着无线通信的快速发展,频谱资源的稀缺促使各种提高频谱利用率的技术得到发展,其中小蜂窝技术和多输入多输出(Multi-Input Multi-Output,MIMO)技术引起了越来越多的注意。不同
无论是基于云平台的高性能计算(HPC in Cloud),还是基于超算中心的云计算服务,高性能计算和云计算在基础设施上的融合都是数据中心重要发展趋势。在融合的趋势下,高带宽、低延时
二十一世纪,人类迈入了"信息爆炸时代".在这个时代,信息靠多种形态信息媒体透过复杂的信息网络系统传递.Internet的盛行,把信息的交互传递推向至高点.在纷繁杂乱的信息爆炸时
缩略语处理是自然语言处理的一个重要任务,具有较强实际应用价值。本文探讨汉语缩略语处理的两个重要方面:基于文档的缩略语自动识别,及基于全称的缩略语自动预测。 对于缩略
Java语言是一种面向对象的语言,它运行在Java虚拟机的平台之上.Java语言具有模块化好,跨平台和类型安全等特点.这些特点使得Java语言更适合于被用来进行快速安全的大规模的软