脑机接口与机器视觉结合的机械臂共享控制研究

来源 :上海交通大学 | 被引量 : 0次 | 上传用户:qweewqqwe123
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
脑机接口是能够让大脑与外部设备进行沟通的一座桥梁。在脑机接口的研究领域中,脑控机械臂一直是热点和难点。本文提出了两种共享控制策略,将基于运动想象的脑机接口控制和基于机器视觉的自主引导有机融合,实现了脑控多自由度机械臂完成物体抓取这一目标。在基于运动想象的脑机接口子系统中,采用共空间模式算法对脑电信号进行特征提取,分别基于线性判别分析和逻辑回归进行分类,从而实现了两种能产生两类别输出的在线脑机接口系统。进一步地,以多自由度机械臂的运动控制为目标,实现了两种对应于以上两个接口的平面运动控制策略。然后还设计开发了相应的用户界面,对这两种运动控制策略都进行了实验验证。在机械臂的视觉与抓取子系统中,基于全卷积神经网络实现了对多目标物体的识别与分割,接着采用最近点迭代算法对目标物体的位姿进行估计,最终设计实现了分别针对单目标物体和多目标物体的自主感知与抓取系统。基于以上两个子系统,本文提出了一种串行的共享控制策略。抓取物体时,受试者和机械臂依次拥有对该系统的控制权。受试者先通过脑机接口将机械臂末端移动至目标物体附近,接着机械臂即可以借助机器视觉的引导完成对目标物体的自主抓取。实验结果表明,受试者能够使用该策略成功操控多自由度机械臂完成对单目标物体的抓取。进一步地,本文还提出了一种并行的共享控制策略,受试者和机械臂在整个任务过程中都同时拥有对该系统的控制权。自主机械臂能够为整个抓取过程提供辅助,即轨迹纠正和抓取辅助。与此同时,受试者也能在整个抓取过程中保持对机械臂运动的监督和干预,以尽可能提高其自身的参与度。与单纯的脑机接口控制相比,受试者在该共享控制系统中能够更快更好地完成多目标物体抓取的任务。本文主要通过引入共享控制策略,实现了脑控灵巧机械臂完成物体抓取这一目标。在未来,这种人机协作的理念有望能将脑机接口技术真正应用到日常生活中。
其他文献
近年来国内地铁车辆转向架构架多次发生弹性振动问题,弹性振动对构架疲劳寿命的影响已引起高度关注。现对国内某型地铁车辆转向架构架动应力进行测试并对数据进行时域和频域分
随着社会经济的不断发展,民事诉讼行为保全案件数量逐年上升,这一制度的缺陷也逐渐显露出来,使其难以发挥保障当事人权益、维护社会公平正义的实效。近几年对民事诉讼行为保
"翻转课堂"近年逐渐在我国兴起,出自本土的"对分课堂"于2014年被复旦大学教授提出,这两种看似不同的教学模式其实存在很多的共性。对比两种教学模式,优劣互见。体现在教师角
在高频次的列车动荷载作用下,焊接式铁路钢桁架桥在服役期间易产生初始裂纹,带裂纹的钢桥节点部位往往承受的是来自各个杆件的复杂多轴荷载,因此,裂纹也多呈复合型扩展。由于钢桥节点的裂纹扩展模拟需要精细化的网格,建立全桥钢桥与局部钢桥节点的映射关系,完成钢桥节点裂纹的扩展路径模拟和疲劳寿命评估,具有很大的实际工程意义。此外,钢桥节点裂纹的扩展在时间和空间上都具有很强随机性和隐蔽性,对于萌生于结构内部或位于
<正> 1998年3月5日,是敬爱的周恩来总理诞辰100周年。望着摆放在案头的总理遗像,他那炯炯的双眸和刚毅的浓眉,亲切和蔼的音容笑貌尽现眼前,使我不禁浮想联翩,引起我久久的思
随着我国路网规模扩大,动车组列车开行数量大幅增加,动车组发生故障时处理人员能否迅速准确的找到故障点,对确保动车组列车安全和正点至关重要。结合实际案例,介绍通过软件图以及
失眠症的影响因素是中医体质形成以及转化的重要因素,这就使得研究失眠患者的体质特征有着深远的临床意义。本文就古典医籍以及现代研究中的中医体质在失眠症的病因病机、临
随着社会的进步,经济的发展,如今信息网络的安全已经成为了所有人都关心的问题,国家在经过对基本国情分析与市场状况考量后,为了更好的维护与发展信息网络的安全,明确信息的安全性保护,全面提升对于信息的安全保护与保障力度,进一步的保护国家信息安全与利益,社会的安全稳定,公安部等国家机构联合制定了信息管理办法,这样便正式开展起了信息的安全保护工作。同时,为了给大众营造一个良好的网络环境,在信息空间上更好的保
换相失败是高压直流输电系统一种常见故障,本文进行了故障原因分析,阐述了换相失败保护设计原理,梳理了引起换相失败的几种常见因素,提出了针对类似故障防范措施。