基于深度学习的多人人体姿态估计

来源 :天津职业技术师范大学 | 被引量 : 0次 | 上传用户:peace_2009
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在灾害、战场等复杂环境下,救援机器人需自动对受伤人员进行动作识别与状态分析,因此对复杂图像中的人体关节点和肢体进行检测,即人体姿态估计有着重要的意义。目前,基于深度学习的室外复杂环境下多人人体姿态估计技术发展迅速,但在搜救应用中还存在许多困扰,例如救援环境恶劣,背景复杂无法得到清晰、高质量的人员图像;人员姿态受环境所限,身体同一肢体呈现出不同的外观;多人交错在一起,肢体存在遮挡、重叠,人体的肢体完整性下降;救援环境属于陌生环境,没有人体姿态的相关先验知识,单人或多人人体的各个肢体可能存在于图像的任意区域,导致模型检测时需要大面积搜索图像内容等等。本文以建立基于深度学习的多人人体姿态估计模型为主要目的,在国内外人体姿态估计研究现状的基础上研究了相关理论基础。搭建了复杂环境图像的人体姿态特征提取网络,对其特征进行提取;其次利用关节点检测网络对所得特征进行关节点估计和聚类;随后采用部件亲和力场(PAFs)对关节点对匹配形成肢体特征,将匹配好的肢体和关节点存入不同的集合中;最后利用匈牙利算法和人体肢体框架构建成完整的人体姿态模型。在常用的人体姿态估计数据集基础上,选择LSP和MS COCO数据集对模型进行训练和实验验证,并通过PCP标准和PCK标准评价多人人体姿态估计的准确性。实验结果表明,本文研究的基于深度学习的多人人体姿态估计模型在室外复杂环境中对多人肢体和关节点具有一定的检测能力。同时为了检测模型的稳定性,在战争、地震以及烟雾等能见度低的三个场景中各自选取100张多人图像进行实验,得到平均的人体估计精度为83%,躯干等特征明显的肢体估计具有良好的结果(最高可以到达84%),特征不明显的肢体末端,例如小臂和手,会根据环境的变化估计精度出现下降。
其他文献
传统的光纤通信系统存在信息被窃取的风险,尤其在保密通信的应用中更难满足安全性的要求。针对安全信息传输技术问题,本文研究了一种改进型高安全性的反射式相干光通信系统。由于信号光与本振光同源,在实现零差检测的同时,能够保证系统高频率稳定性。并且避免了使用光锁相环或闭环频率跟踪控制系统所带来的容易引起环路不稳定的问题。同时,对发射端的结构做出了改进,避免在信号调制过程中由重复调制产生的再调制噪声,改善调制
近年来,随着我国市场经济的快速发展,无线移动宽带通信技术也得到迅猛发展,移动应用深入到日常生活和工作的每个角落,人们对移动宽带通信的依赖度日益提高,自然而然对移动通信质量的要求也不断提高。高速铁路是移动宽带应用极为活跃的领域之一,随着中国高速铁路的飞速发展,在移动速度快、业务量大、部署场景复杂的高铁系统内提供高质量的移动通信服务,已经成为高速铁路通信网建设和发展面临的重大挑战。当前我国高铁部门已经
狄拉克创立的符号法和表象理论,对于用量子光学的观点重述经典光学变换起到了重要作用,尤其有序算符内的积分技术(简称IWOP技术),是一座联系经典光学变换与量子光学算符的直
体内分子成像作为一种在细胞和分子水平上表征和测量生物过程的非侵入性技术,因其具有早期、灵敏和特异性诊断疾病或监测治疗效果的潜力而受到广泛关注。由于各种成像技术的
计算机断层扫描(CT)成像自问世以来便受到极大的关注,已经成为医学诊断中不可或缺的辅助手段。CT图像采集过程中采用较高剂量X射线会增加患者的潜在患癌风险,因此目前医学临床诊断大多采用低剂量CT成像技术。然而,降低辐射剂量会给CT图像引入大量噪声和伪影,进而导致图像质量下降。在保持CT图像组织结构和病理信息完整的基础上,尽可能移除低剂量CT图像上的噪声和伪影,具有重要的理论研究意义和临床应用价值。传
铜及铜合金具有优异的导电、导热、耐腐蚀性能而被广泛应用于工业领域。但是,即使通过加工硬化,铜的强度和硬度也远远低于使用要求。一般而言,铁合金不仅具有较高的硬度和耐
论文通过对博兴洼陷的樊154区及邻区沙三中亚段二砂组重力流储层开展研究,着重分析了重力流沉积的成因类型及沉积微相特征,重力流储层构型要素及构型样式与分布,为研究重力流
有机薄膜晶体管(Organic Thin Film Transistors,OTFTs)可广泛应用于柔性显示、传感器、射频标签而受到科研工作者广泛的关注,经过几十年的发展,OTFT无论从器件结构亦或是器件性能方面都有很大的提高。同时,功能性的OTFT研究也引起了科研工作者的关注,其中有机光敏薄膜晶体管(Organic Phototransistors,OPTs)结合了光探测和开关功能,是最具有潜力
聚合物的精确设计合成一直以来都是高分子化学领域最受关注的研究方向之一。通过对聚合物结构进行设计,能够得到各种各样的精细结构聚合物和功能性聚合物。本文设计合成了多
语音情感识别一直是人工智能领域的研究热点,由于情感本身的多面性以及情感学发展的迟延性,该研究发展程度距离成熟阶段尚有较大差距。结合其现有水平与应用需求,本文从特征