基于时空关键点的人体动作识别

来源 :中山大学 | 被引量 : 0次 | 上传用户:leonoox
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
利用计算机视觉技术识别并理解人体的动作和行为是一个在人机交互和视频监控领域具有广泛应用前景的研究课题。利用计算机进行人体动作识别不仅可以大大减轻传统人工识别的工作量,而且随着计算机识别效率和精确度的提升所带来的经济效应和社会效应也将日益增加。目前,计算机人体动作识别技术可应用的场合有:视频分类、监控视频分析、体育视频处理以及智能家居开发等等。   关于计算机人体动作识别的研究在国内外已经开展多年,目前主要的研究方法大致可以分为以下几个方面:基于目标跟踪的方法、基于光流的方法、基于形状模板匹配的方法和基于时空关键点分析的方法。基于目标跟踪和形状模板匹配的方法在提取人体动作的全局特征之前首先要得到人体的轮廓或者人体动作的形状模板,而轮廓提取过程和人体动作形状模板构造过程容易受到噪声和背景变化的干扰,系统鲁棒性相对较差。基于光流的方法利用像素间的光流信息进行人体动作识别,但这类方法容易受到噪声以及光照强度变化的干扰。基于时空关键点分析的方法通过滤波、系数变换等数学方法,求出视频滤波响应或者系数变换的极值点,并将极值点所处位置表示为人体动作的时空关键点位置,从时空关键点中提取人体动作的时空运动特征作为识别的依据。这类方法对于低分辨率视频,以及噪声和摄像头运动造成的干扰也具有一定的鲁棒性。当然,选择不同的时空关键点检测算法以及提取不同的时空关键点特征对人体动作识别的效果也是不同的。   计算复杂度较高、识别精确度不高以及系统鲁棒性不够等问题仍存在于目前的计算机人体动作识别方法当中。如何在已有的研究基础上提高人体动作识别的精确度和效率而不付出太大的计算代价成为当前计算机人体动作识别的主要研究方向。本文在前人的研究基础上,采用结合人体动作时空关键点和三维SIFT局部描述子特征进行人体动作识别。本文提取这两类特征进行人体动作识别,主要是考虑时空关键点对人体动作时空运动信息的把握以及三维SIFT局部描述子对人体尺度和旋转的不变的特性。基于人体动作时空关键点的特征提取方法使用二维Gabor滤波器对相邻视频帧差进行人体动作关键点检测,再通过累积多帧的人体动作关键点形成包含更丰富人体动作信息的人体动作时空关键点云,并从人体动作时空关键点云中提取人体动作的时空特征信息。结合三维SIFT局部描述子的特征提取方法通过计算SIFT特征点和它邻域的梯度大小和方向,利用统计梯度方向直方图的方法得到视频的三维SIFT局部描述子,并提取出三维SIFT局部描述子特征进行人体动作识别。实验结果表示,本文采用的结合人体动作时空关键点和三维SIFT局部描述子特征的人体动作识别方法有较好的识别效果。  
其他文献
滚动轴承作为工业生产中旋转机械设备的重要基础部件,其运行状态直接影响到机械设备的性能及安全。滚动轴承在其全寿命周期内,从开始工作会经历一系列性能退化状态的改变,直
表面肌电信号(sEMG, Surface Electromyography)作为人体产生的一种重要的生物电信号能够反映神经和肌肉系统的功能和生理状态,被广泛应用于人机交互、假肢控制、遥控机器人
近年来,随着社会经济的高速发展和城市化进程的加快,国内许多城市尤其是大中型城市的机动车保有量飞速增长,带给社会和人们极大便利的同时,也导致了交通阻塞、事故频发等许多
数据挖掘算法可以从大量的数据中搜索出有价值的信息,常用的分析方法主要有分类和聚类。分类算法是一种有监督学习算法,需要先从训练集中学习分类标准,然后根据学习到的分类
近年来,随着海洋资源开发、海底勘探等活动的不断深入,水声数据可视化技术得到了广泛应用。通过可视化技术可以重构出水下声纳数据的图像,有利于研究人员对数据进行更加直观有效的分析,从而提高数据的使用效率。论文简要的概述了水声数据可视化的研究背景和研究现状,阐述了现有的水声数据可视化方法分类,对几种典型体绘制算法的性能进行了分析和比较,最终采用绘制出图像质量最高的光线投影算法实现水声数据的可视化。针对光线
卫星导航定位系统极易受到多种形式的干扰,其中欺骗干扰是最主要的干扰样式之一。该类干扰具有与真实信号相类似的增益,并在时、频、空等多域与真实信号完全或部分重叠,因此
合成孔径雷达(SAR)具有高分辨率、全天候工作等优势,并且SAR图像包含大量地面目标信息,充分利用这些信息,无论是在军事领域还是在民用领域都将发挥巨大作用。要利用这些信息
论文主要关注探地雷达(GPR)系统的信号中信号参量的估计问题。在实际的探地雷达系统中,GPR向地面发送电磁波。当这些电磁波遇到不同层面的电介质时,回波将被反射回地表。回声
近年来,近海海域赤潮频发,造成严重危害,引起了世界各国政府、公众和科学家的关注。鉴于赤潮对海洋环境和人类健康的负面影响,对有害赤潮的自动识别以便有效预防和快速鉴定赤
随着微电子与集成电路技术的不断发展,机器视觉领域开始从结构复杂、体积大、成本高的传统分体式机器视觉系统逐渐向着集成度更高、可靠性更高、能耗更小、成本更低、应用开发更便捷的智能相机系统进行发展。目前,智能相机的价格较为昂贵,依赖进口。本文提出了一种基于开源项目的低成本机器视觉智能相机系统的设计方案,并且在实验室条件下设计并完成了智能相机的原型样机。该智能相机基于嵌入式Linux开源操作系统和开源计算