基于卷积神经网络的多人骨架提取算法研究

来源 :西安理工大学 | 被引量 : 0次 | 上传用户:al035258
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
人体的骨架提取是计算机视觉研究领域中非常重要的研究方向。随着计算机硬件水平的日益提高、计算能力指数级的增强,使得当前在图像处理方面有了长足的进步,因此在计算机上处理分析人体动作的需求也日渐增多。人体骨架提取技术是分析行为动作的基础,此技术具有非常重要的实际应用价值,如在监控领域希望预先判断出一个人的动作是否具有危险性;在体育、舞蹈等领域希望通过计算机进行人体动作打分来作为比赛参考标准。近年来,随着大数据与人工智能的发展,许多领域的问题转用深度学习卷积神经网络的方法来进行研究。对于人体骨架的提取也大多由传统方法转为使用卷积神经网络的方法。在实际应用中,多人的场景大于单人的场景,多人骨架的提取更具有研究价值。本文基于卷积神经网络在静态图片和视频两个方向阐述了提取多人人体骨架的方案,具体研究内容如下:1.在静态图片的多人骨架提取上,本文探讨了自上而下与自底向上方法的区别,并采用自底向上的方法对图片进行识别,在关节点特征的提取上采用热力图来表示人体关节点。随后采用改进的亲和域向量方法来寻找关节点之间的关系,优化关节点之于人体的匹配。最后基于改进的残差网络作为基础模型,采用MPII数据集上的数据进行训练,得到识别效果。2.在基于视频的多人骨架提取上,本文采用两种识别方案。在第一个方案中,对于之前静态图片识别方案的基础上加以改进,采用基于RNN的方法去学习帧于帧之间关节点的联系,并探讨了 RNN改进模型GRU对识别的影响,最终得到视频的识别结果;在第二个方案中单帧图片中采用Faster R-CNN的方法检测人体框,并在每个人体框中检测各个人体的骨架图,最终使用IOU跟踪方法寻找视频中帧于帧之间的关系优化识别效果。两种方法的训练数据集均采用PoseTrack,最终对两者的识别率与识别效率进行对比。
其他文献
网络舆情是通过互联网的新兴媒体,比如新闻门户网站、论坛、微博、微信等来针对现实生活中的某些热点、焦点问题发布具有倾向性的言论和观点。如果引导不善,将会产生负面的舆
生命观是毛泽东关于“人”的思想的重要组成部分,集中体现了毛泽东的人生哲学。从思想渊源看,毛泽东的生命观受到马克思主义生命本质思想、近代西方生命价值思想和中国传统生命
随着互联网技术、物联网技术、云计算和大数据分析技术的快速发展,校园信息化建设进入智慧校园阶段,智慧信息服务[1]在学校教学、科研、管理和校园生活中的作用越来越大。智
LendingClub即将上市,这给全球互联网金融特别是P2P行业打了一针兴奋剂。毕竟,即使在金融高度发达的美国,它也是第一家上市的P2P企业。但是,笔者的观点很明确,中国很难产生一家Len
报纸
本文对超滤膜技术进行简述,并对超滤膜技术在水处理中的具体应用进行分析,归纳出超滤膜技术未来的发展方向和前景,供相关人员参考。
合成孔径雷达(SAR)可以用来检测地面目标,已经广泛的应用在军事和民用领域,成为了信号处理和检测技术的研究热点。而地面动目标检测(GMTI)是多通道合成孔径雷达(MSAR)中一项
对于高职院校而言,培养应用型具有创新创业能力的人才是根本任务。同时,培养高质量创新创业人才也是新时代发展的必然要求。但是当前高职院校的创新创业教育及其师资队伍建设
图像分类和图像检索技术是当前计算机科学飞速发展和数字图像资源爆发式增长形势下智能信息处理领域研究的热点问题。如何对图像内容进行有效的表示是图像分类和图像检索技术中一个关键问题。目前,在图像分类与图像检索技术中,特征描述是图像表示的主要形式,存在着高维度与复杂性等问题。图像的稀疏表示模型作为一种新兴的特征表示方法,能够有效解决实际应用中所存在的存储量、计算复杂度与图像解译性等方面的问题。此外,深度学
水稻三化螟是韶关市水稻生产上的重要害虫之一,做好水稻三化螟的预测预报是防治工作的关键。通过10多年的实践,结合历史资料,总结出一套适合韶关地区的预报方法。
以鹰嘴豆为原料,选取了两株不同来源的纳豆芽孢杆菌F-2-4和S-15,分别通过单接种和混合接种的方式,制备鹰嘴豆纳豆成品,并测定其纳豆激酶活力,结果表明:混合接种制备的鹰嘴豆