基于深度学习的多脑运动想象脑电解码研究

来源 :杭州电子科技大学 | 被引量 : 0次 | 上传用户:xinxinxiangrong1
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
脑机接口系统(Brain Computer Interface System,BCIs)是一种不依靠外周神经通路和肌肉等常规信息传递通道来控制外部设备的系统。传统单脑运动想象脑机接口作为最常见的主动式脑-机交互范式,存在信息传输速率较低、稳定性差等问题,难以满足快速、高精度、多指令等复杂作业的性能需求。近几年,越来越多的学者开始研究如何将基于脑电的脑机接口单脑范式向多脑扩展,以得到更稳定的分类结果。与此同时,深度学习强大的学习性能也给脑电的解码带来了新的技术与方法。综上,本论文开展了基于深度学习的多脑运动想象脑电解码研究。本文先通过脑电超扫描技术记录多脑运动想象脑电数据,其次通过深度学习算法对多脑运动想象脑电信号解码研究,最后设计并开发了多脑运动想象脑机在线分类系统,主要的研究内容与结果包括:(1)针对传统过滤器组共空间模式(Filter Bank Common Spatial Pattern,FBCSP)无法端到端学习多脑特征的局限性,本文提出基于时间适应性共空间模式网络(Temporally Adaptive Common Spatial Patterns Neural Networks,TACSPNN)深度学习模型的多脑运动想象脑电解码方法。本文首先根据FBCSP的算法步骤,逐层构建了TA-CSPNN模型,结合深度学习分类器完成脑电信号的端到端分类。其次,设计了三种多脑融合策略:数据层融合、特征层融合、决策层融合,最后将它们应用在TASCP-NN模型上,验证其在多脑运动想象上的可行性。实验结果表明,多脑融合TA-CSPNN模型相比单脑分类有着显著的稳定性提升,决策层融合的TA-CSPNN模型更是有着显著的准确率提升。(2)针对TA-CSPNN在深层融合单脑高维特征导致多脑脑电有效信息丢失的问题,本文提出改进SincNet深度学习模型的运动想象脑电解码方法—运动想象正弦网络(Motor Imagery SincNet,MI-SincNet),并将其应用于多脑运动想象脑电解码。MI-SincNet首先通过在第一层设计自适应脑电频带的滤波器组学习低截止频率和高截止频率,减少参数量的同时也更好地提取脑电频带特征信息。其次,沿着通道与时间方向对浅层信号输入进行卷积,获取脑电信号的时空信息。再次,减少了网络深层的节点数,降低了大量的计算开销。最后,根据MI-SincNet在浅层提取特征的特点,同样从数据层、特征层、决策层三种层次设计了三种多脑融合模型。多脑运动想象数据集上的实验结果表明,MISincNet在单脑分类上比原始SincNet、CNN、LSTM和TA-CSPNN具有更佳的分类性能。三种MI-SincNet的多脑融合模型同样表现出良好的分类效果,并且在浅层进行特征融合的MI-SincNet模型拥有着最高的分类精度。(3)设计并开发了一个基于多脑运动想象的脑机分类系统。该系统以MISincNet的特征层融合算法模型为基础,在对多人进行在线运动想象脑电信号识别的任务场景中,可以同时对每个受试者的脑电信号和多脑融合脑电信号进行解码,从而可在三种任务状态:空闲、想象左手、想象右手实现高精度分类判别。系统使用仪表盘可视化显示识别速度和识别精度,可以实时看到单脑脑电信号和多脑脑电信号的分类效果。
其他文献
<正> 酸雨是当代世界上面临的主要环境问题,并已成为人们普遍关注的公害之一。近年来,我国各地区对大气污染和降水化学成分的分析表明,我国南方地区酸雨出现的频率大大高于北方地区。由于城市工业区排出的二氧化硫、氮氧化物等污染物,不只污染城市空气,而且可随着气流输送到很远的距离。加之污染物可以作为凝结核,在云滴、雨滴形成的时候,就可能具有酸的因素。云内的成雨过程,以
期刊
随着教育科研人数激增以及学术活动的多样化发展,网络中文献的数量庞大且增长迅速,因此各种在线学术平台相继构建。发表、检索和阅读学术文献是学校科研、教学、管理和交流工作的重要组成部分,学术平台也逐渐成为智慧校园建设的重要基础平台。在高校中,重名人员日益增多,这些大量重复的姓名会极大降低学术平台中文献检索的效率,并且可能检索出错误的数据,给高校知识图谱的构建带来极大不便。姓名消歧系统凭借维护成本低、检索
学位
随着人工智能和深度学习技术的发展,复杂场景下的文本检测识别技术逐渐成为计算机视觉的热门研究领域。在工业运输环境中,员工需要驾驶叉车运输货箱到达指定仓库,而由于人工原因经常会出现错看货箱编码、漏送货箱等情况,导致运输效率低下。因此本文从复杂场景下的文本检测识别技术入手,通过文本检测识别技术识别货箱上的编码,从而帮助员工更清晰、更直观地了解货箱编码。此外,在实际工厂环境下,存在光线昏暗、文本不规整、设
学位
随着互联网的发展,推荐系统作为一种可以满足用户个性化需求的技术,受到了广泛的关注与研究。大规模且高质量的数据对推荐系统的发展至关重要,机构和企业通过数据共享提升推荐准确率,但这种方式存在着数据隐私安全的问题。与此同时,用户保护自身隐私数据的意识逐渐觉醒,相关法律法规也日益完善,如何在保护数据隐私的前提下调度多个参与方共同训练推荐模型是亟需解决的问题,具有重要的研究价值和应用前景。近年来,面向隐私保
学位
多目标优化问题(Multi-objective Problems,MOPs)是现实世界中极为常见的难题,因为其多个目标之间往往互相冲突,无法同时达到最优。多目标优化算法(Multi-objective Optimization Evolutionary,MOEA)是解决MOPs的重要方法,其中基于分解的多目标优化算法(Decomposition-based Multi-objective Opti
学位
继我国全面打赢脱贫攻坚战,我国的“三农”工作重心发生了历史性转移,我党开始全面部署实施乡村振兴战略。自乡村振兴提出以来,党中央在乡村振兴政策制度供给上不断发力,促使大量公共资源开始向乡村领域倾斜。在权力层层下放过程中,乡村振兴领域难免会出现资金闲置浪费、项目建设偷工减料等诸多问题。为了更好地监督乡村振兴政策的贯彻落实,国家审计机关高度重视并积极开展乡村振兴政策跟踪审计实践。然而,乡村振兴政策部署尚
学位
七普与六普数据相比,临沂市呈现人口规模增长、老龄化加剧、家庭规模小型化的趋势。分析2010—2020年临沂市的人口结构和住房需求数据,用主成分分析和多元线性回归模型相结合的方法,结论显示:人口总量、收入、平均家庭户规模对临沂市住房需求影响最大。据此提出了临沂市住宅市场供需平衡发展的对策和建议。
期刊
患有色觉缺陷(CVD)的人难以区分颜色,全世界约有2亿人受到色觉缺陷疾病的影响。生活中最常见的色觉缺陷类型是L椎体细胞缺陷和M椎体细胞缺陷,我们通常称为红绿色盲。由于L椎体细胞缺陷和M椎体细胞缺陷是由性染色体X染色体上的基因决定的。因此,男性比女性更容易患上这种遗传性疾病,且目前的药物无法治愈。这种疾病会导致可识别信息的丢失,从而严重影响日常生活,甚至可能使他们面临危险。为了帮助CVD患者改善日常
学位
从单张图片中进行三维人体姿态与形状估计是计算机视觉中一个开放问题。由于图片天然缺乏深度信息,模型很难获取真实的深度信息。并且在真实场景中,遮挡问题普遍存在,导致人体可见信息不全。此外,对人体模型进行服装建模仍然是一个复杂问题。遮挡问题是人体姿态和形状估计任务中一个关键问题,其中遮挡包括人体的自我遮挡、物体与人的遮挡以及人与人之间的遮挡。为此,本文提出了一个新的框架,它整合了可遮挡感知的轮廓和2D关
学位
知识图谱是一种高度结构化的语义知识库,在语义检索、个性化推荐等领域有着广泛应用。三元组抽取作为知识图谱构建过程中至关重要的步骤,目的是从文本数据获取两个物理事实之间存在的客观联系。面向限定领域的三元组抽取方法需要预先定义所有实体和关系类型,使用机器学习或深度学习的方式在大规模数据集上训练分类模型。然而,在实际应用中实体和关系类型都会随着文本量的自然增长而增加,预先定义所有实体关系类型较为困难。对此
学位