基于深度相机数据驱动的人形机器人运动及算法研究

来源 :浙江师范大学 | 被引量 : 0次 | 上传用户:usaend
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
机器人技术一直是人工智能领域的热点。为了能提高社会生产力,改善人们的生活方式,一代又一代的科研人员为能解放人类的劳动或者特殊场合代替人类而致力于机器人技术的研究。随着理论知识和实践经验的不断完善,各种类型的机器人开始出现在人们的日常生活中。当然,最为常见的一些是根据控制器或者语音实现对机器人的控制,如一些轮式的扫地机器人等。在机器人领域中,轮式的移动方式更为流行,而如人类般的步行较为罕见。因为,步行所涉及的知识更为复杂,不易于产品的设计,而本文则采用了仿人型机器人作为研究对象。相比于传统的控制器和语音控制机器人,本文将使用Kinect采集的数据,利用姿势和手型识别控制机器人。将新型的人机交互方式与热门的人形机器人进行结合,完成本次课题的研究,其主要研究内容如下:
  (1)在详细了解Kinect传感器的工作原理后,利用它所采集的彩色数据、深度数据和骨骼数据进行姿势识别和手型识别。通过Kinect采集的骨骼数据,利用所得表征关节的深度数据(空间信息)建立空间向量,根据表示运动的空间关节向量的夹角计算结果,从而完成人体姿势的识别判断,并进行姿势识别实验,发现实时的人体姿势识别率还不错。
  (2)相比于传统的以手型原图和手型轮廓图的Hu矩为数据特征的手型识别,本文提出了以手型骨骼的Hu矩为数据特征的手型识别方法,发现其识别率有了很大的提高。并且为了满足能在较远距离识别手型,本文提出了利用Kinect采集的数据,结合手部的彩色图像和深度图像,进行相关图像处理,获得较为清晰的手型图,继而进行骨骼化。为了获得其识别性能,设计了相关实验进行分析和验证。
  (3)利用Arduino Mega2560控制器,组装人形机器人作为下位机。为了完成人形机器人的步行算法,先利用正运动法建立运动学模型。要使人形机器人能稳定步行,则摆动腿的脚踝关节运动的轨迹要有二阶光滑度,即其轨迹函数二阶可导且连续。因此,选用三次样条插值曲线作为轨迹函数,通过逆运动学分析,解出各个关节的角度,从而完成各个关节角度序列的编译。为了避免在实验过程中舵机因过载而烧毁,实验中还提出了稳定性验证,从而提高了舵机的存活率。
  (4)利用OpenCV库,在Visual Studio2013平台上搭建人体姿势和手型识别程序,在Arduino IDE上编写人形机器人的运动算法其它动作算法上传至人形机器人的控制器,使用串口通信,完成了利用人体姿势和手型的识别控制人形机器人的行走及其它运动的整个系统设计和实现。
其他文献
赠与行为是赠与人无偿将自己财产给予给他人的行为。赠与合同作为典型的无偿性合同,与以买卖合同为代表的有偿合同存在差异。正是由于赠与行为具有无偿性,法律往往给予赠与人更多的责任优待。《合同法》第189条和第191条是关于赠与人损害赔偿责任的特殊规定,目的就是为了平衡赠与行为法律关系中的双方当事人之间的权利义务关系。尽管如此,在具体的司法实践中仍然在对第189条和第191条认识不清,导致同案不同判情形的
太阳能两步热化学循环制氢是指利用太阳能聚光器聚集太阳能产生高温,推动化学反应,实现两步循环制氢的方法。ZnO热解和CH-ZnO重整是目前研究最多的两种两步热化学循环制氢方法。作者对太阳能ZnO热解和CH-ZnO重整两步热化学循环制氢系统进行了分析,分别计算了两者的系统效率,进行了对比,并以文献中提出的SynMet太阳能反应器为基础,利用CFX软件计算并分析了腔体温度、反应物进口速度和CH-Ar体积
台风(热带气旋)给我国东南沿海各省市的工农业生产、交通运输和人民生命财产安全造成严重威胁。因此,台风风速(强度)的估计和预报是事关国家财产和人民生命安全的重大问题。然而,基于气象学的热带气旋定强方法在准确性和自动化方面仍有不足。本文采用机器学习和图像处理技术,利用先进的半监督学习方法实现热带气旋强度估计,主要研究内容如下:  1、将热带气旋强度估计问题描述成一个分类问题,将热带气旋强度等级当作类别
学位
由于霍尔效应式位移传感具有安装简易、结构牢固、功耗小、寿命长、频响高(可达1MHz)、不怕灰尘及油污等特点,所以该传感器广泛地应用于工业测控领域中。但是该传感器具有非线性和容易受到环境温度影响的缺点。因此,本文深入研究了该传感器的非线性特性和温度漂移特性的两个关键问题,也对这两个关键问题提出了解决的方法。其主要研究成果如下:  (1)线性度参数是决定传感器精度的重要指标之一。针对该传感器的非线性,
The location selecting of logistics center plays an important role in logistics system strategies.By analyzing and demonstrating several locating methods such as Gravity Method,CFLP Method,Baumol-Wolf
随着集成电路产业的快速发展,超大规模集成电路应运而生。集成电路规模的扩大,器件特征尺寸的减小,导致由随机缺陷引起的集成电路成品率损失愈发严重。通过对版图设计阶段中的版图优化来提高集成电路的成品率已经成为研究的热点。版图关键面积是实际的版图优化过程中重要的参考信息,减少随机缺陷导致的版图关键面积是提高集成电路成品率的有效方法。然而针对大规模版图线网,单机下的关键面积提取速度并不理想,无法实现大规模版
学位
本文通过对车用高功率镍氢动力电池组进行循环寿命试验,结果显示,2000次循环工况结束后,电池的容量衰减率为21.6%。研究分析了电池的模组不一致性对电池容量变化的影响,同时考察了循环寿命过程中电池组容量、内阻及功率等电池参数的变化特征,对动力电池的循环寿命预测研究和实际应用具有一定的指导意义。
近年来,我国的经济状况以及全球的经济状况对于整个局势都产生很大作用,县级区域的经济速度的提升出现下降。过去几年实体经济大部分都是高速提升的,现在也出现了下滑的态势,然而互联网商业反而迎头而上,出现增长的局势。电子商务及其相关产业在制造业萎靡和产量下跌的时候,一直保持着稳定快速增长的趋势。各大电商巨头在巩固好在一线城市的市场后,也在二三线城市积极发展市场。由于物流仓储等配套服务的完善,网络的普及发达
学位
Reactive oxygen species(ROS) originating from the NADPH oxidases AtrbohD and AtrbohF play an important role in abscisic acid(ABA) -inhibited primary root growth in Arabidopsis. However,the mechanisms
期刊