基于视觉的无人机外部信令控制技术

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:zuochuan002
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,对旋翼无人机的研究十分火热,尤其在应用领域,旋翼无人机极具潜力。目前人与无人机的交互比较成熟的方式还是通过遥控器控制,这种方法通常需要控制者对无人机相关知识有一定的了解,而且需要一定量的训练才能使无人机按预想动作飞行。在保证无人机稳定飞行的情况下,如果能把对无人机的各种操作整合成为接口,使用者不需要完全理解无人机各种专业知识和术语,只需通过几个手势就能远程控制无人机飞行,这对使用者是一个很大的便利。本文主要研究在无人机平台上利用手势进行信令控制,主要工作如下:  1.手势的检测和分割部分。本文首先研究了基于肤色的检测和分割方法,对几种常见的颜色空间和肤色模型通过实验进行了比较,选择了分割效果最优的椭圆边界模型结合YCbCr颜色空间的算法,并融合肤色信息和运动信息,给出了一种最适合本文应用场景的手势分割方法。  2.特征提取和静态手势识别部分。在特征提取阶段,选择了傅里叶描述子、PCA-HOG特征、BOF-SRUF算子三种图像算子分别与手势的圆形度和Hu不变矩融合形成三个新的特征,并分别输入支持向量机(SVM)训练和试验,为每个新特征选定了最合适的维度和训练参数。在手势识别阶段,选用支持向量机作为手势识别的分类器,将前述三种融合特征输入进行训练和实验,验证了PCA-HOG融合特征在识别率、实时性和鲁棒性方面都比其他两种特征要好,并利用该特征实现了对手语1至9和两种自定义手势的稳定识别,并且对手势的旋转、平移有一定的鲁棒性。  3.指尖检测和定位部分。通过实验比较了三种常用的基于轮廓的指尖检测算法,并结合三种算法的优点形成快速鲁棒的算法。算法流程是,首先基于手势轮廓的凸包和凸缺陷提取初步候选点,再根据静态手势识别的结果选择下一步过滤杂点的方法,如果结果显示不需要进入动态手势识别,则用指尖的曲率阈值精确确定所有手势的指尖点,而如果当前静态手势是进入动态识别的起始手势,则用指尖点到掌心点的距离作为阈值来滤除候选点中的非指尖点。这种算法具有很好的稳定性和实时性,非常适合本文的无人机指令控制系统。  4.动态手势识别部分。以静态手势1为动态手势序列的起始手势,当图像中出现静态手势1时,则开始动态手势识别序列采集的相关步骤,当连续几帧检测不到静态手势1时,则开始序列采集的结束步骤。将静态手势1的指尖的坐标序列作为手势的轨迹,再将相邻坐标点指尖的方向角量化后的方向向量作为输入,利用隐马尔科夫模型(HMM)作为分类器,实现了6种自定义动态轨迹的识别。  5.人机交互部分。通过结合前面动静态手势识别的研究结果,以3种静态手势和6种动态手势定义了总共9种指令作为外部信令,并利用PX4无人机开发套件编写了地面控制脚本,在收到手势识别部分的指令后,转换为相应的MAVLink指令通过3DR数传发送给无人机,能够实现对无人机的飞行控制。  本文通过多特征融合和支持向量机实现了静态手势识别,给出了一种适合本文应用场景的指尖检测和定位算法,在这个基础上,结合隐马尔科夫模型实现了动态手势的识别。最后选取了3种静态手势与6种动态手势实现了控制无人机的9种指令,利用VC++、OpenCV和Python语言编写了相关的软件和通信程序,完成了对无人机基础飞行动作的实时准确控制。
其他文献
随着棉纺企业生产规模的不断扩大,生产过程也变得日益复杂,仅仅依靠经验手工编制生产调度计划已难以应对快速多变的市场需求。因此,对计算机辅助生产调度的技术进行研究,设计并实
随着计算机性能的快速提高,计算机视觉被越来越广泛的运用到了许多场合,如遥感图像分析、文字识别、医学图像处理、多媒体技术和图像数据库等方面。计算机视觉中的许多问题,
多属性决策(又称有限方案多目标决策)是现代运筹学和管理科学的重要分支,其理论与方法在经济、工程、管理和军事等诸多领域都有着广泛的应用。当人类面临着越来越多的复杂、
快速发展的半导体集成电路成为了现代工业升级进步的强力助推器,而依赖高精的集成电路的工业设备中,静电放电引发的火花容易造成设备故障。静电火花能辐射出高频电磁波,瞬时
煤矿的工作环境比较恶劣,极易发生漏电故障,漏电事故处理不及时会给煤矿生产带来严重的安全隐患,因此需要及时、快速、准确的报告漏电故障信息,以进一步采取相应措施,保证矿井的安
本文旨在研究信道公零点对现有的典型盲算法的影响,揭示几种典型算法对信道公零点的容忍度。依赖二阶统计量进行信道盲辨识的本质性缺陷是被辨识信道必须是互质的、不含公零
本课题是天津市科技创新专项资金“新一代移动通信网络覆盖关键技术研发及示范应用”的一个子课题。TD-SCDMA系统干扰主要分为系统内干扰与系统间干扰,本文仅针对系统内的干扰
注塑机是现代产品制造业中主要加工设备之一,是成型塑料制品的专用设备。近年来注塑机测控技术的飞跃发展为实现塑料制品的先进生产奠定了重要基础。随着注塑机的发展,其对测控
传统的聚类算法大多直接在特征空间中进行分析计算,对于高维数据无法实现直观有效的聚类结果图形可视化。基于距离相似性的聚类算法易于理解,计算效率高,但无法有效处理空间
成纱质量指标的高低是成纱产品定等的一项重要考核依据,它不仅显示了成纱品质的优劣,而且对后续的纺织生产工艺和成品的质量有着直接的影响。因此,如果能够对从配棉开始到生产出