基于时空卷积注意力网络的脑电情绪识别

来源 :河北大学 | 被引量 : 0次 | 上传用户:lanyezy
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
情感是人类工作生活中不可或缺的一部分,随着人机交互和人工智能领域的发展,情绪识别方面的研究已经在面部表情、语音、文本和生理信号等各个领域展开。但是面部表情、语音、文本等信号中的情绪具有很大的伪装性。与这些非生理信号相比,脑电(Electroencephalogram,EEG)信号可以更真实地反映真实的情绪状态。然而基于脑电信号的情绪识别仍然有很大的改进空间,如何更有效地提取脑电信号的情绪相关特征,并提高脑电情绪识别的准确率成为学者们的研究重点。本文利用卷积神经网络、门控循环单元和注意力机制的强大的特征提取能力,构建两种脑电情绪识别分类模型,获得了良好的分类效果。本文的主要研究内容如下:(1)基于三维时空注意力网络的脑电情绪识别为了提取脑电信号的时空特征,本文构建了一种基于三维时空注意力网络的脑电情绪识别模型。首先根据大脑电极的空间位置将一维脑电信号映射为二维空间矩阵,使用三维卷积神经网络(Three-Dimensional Convolutional Neural Networks,3DCNN)提取脑电信号的时空特征,然后使用双向门控循环单元(Bidirectional Gated Recurrent Unit,BiGRU)提取脑电信号的时间相关信息,并使用注意力机制对提取的时间信息进行加权,最后使用Softmax分类器进行分类。本文在上海交大情感脑电数据集(SJTU Emotion EEG Dataset,SEED)和四种情绪的上海交大情感脑电数据集(SJTU Emotion EEG Dataset for Four Emotions,SEED-IV)上进行了测试实验,平均分类准确率分别为97.26%和88.00%。(2)基于多尺度时空卷积注意力网络的脑电情绪识别为了从脑电信号中尽可能多地提取情绪相关的时空特征,本文构建了基于多尺度时空卷积注意力网络的脑电情绪识别模型。首先使用四个不同层数的卷积神经网络捕获脑电信号不同深度的时空特征,然后构造多尺度卷积神经网络以获得脑电信号的多重时空特征。最后,使用基于Bi-GRU的注意力机制提取脑电信号的时间相关信息,并对提取的信息自动分配权重,突出重要的情绪信息获得更具有判别性的情绪相关特征。该模型在SEED数据集、SEED-IV数据集和使用生理信号进行情绪分析的数据集(Database for Emotion Analysis using Physiological Signals,DEAP)上进行了测试,实验结果表明所构建的模型提高了情绪识别的准确率,并具有一定的泛化能力。
其他文献
切换控制系统是一种特殊的混杂动态系统,是由有限个连续(离散)的子系统和特定的切换信号组成的。在网络控制系统、生物工程、航天领域以及汽车工业领域等有着广泛的应用。切换系统的稳定性和镇定一直是学者们关注的热门问题。同时,切换延迟系统的镇定控制结果也较为丰富,但尚未见到预测器在切换延迟系统中的应用。事件触发控制是为减轻网络通讯负担而产生的控制机制,主要是解决网络控制系统中网络拥堵、资源浪费以及带宽资源受
学位
图像拼接技术是指利用特征匹配、几何变换以及图像融合等算法,将在同一场景下拍摄的多张具有重叠部分的图像拼接成一幅无缝的广角图像。图像拼接技术可以突破传统单个相机视野较小的局限性,容易得到更大的视野范围,且不会存在明显的重影或者失真现象。近年来,随着相关算法的不断深入研究,图像拼接已经在很多领域被广泛的应用,比如医学图像处理、遥感图像以及最近比较流行的虚拟与现实技术。APAP(As-Projectiv
学位
离散事件系统(Discrete Event System,DES)是由不规则时间间隔出现的事件序列驱动的一种动态系统。实际中大部分人造系统从逻辑层面都可以抽象为离散事件系统进行研究,如柔性制造系统、轨道交通系统、通信系统等。在实际运行中,离散事件系统的某些状态(通常称为禁止状态)可能会使系统降低运行效率甚至导致故障的发生,因此要避免离散事件系统到达禁止状态。离散事件系统禁止状态控制器设计是指设计一
学位
随着“碳达峰、碳中和”战略目标的提出,我国的新能源产业进入快速发展阶段。风能是我国新能源使用占比较高的一种能源。目前,风电机组的装机容量日益增长,同时受极端天气、工作人员疏于维护、自然老化等因素的影响,风电机组的故障问题逐渐增多。风电机组故障后的维修工作量较大且成本较高,为了节约风电机组故障后维修所需的人力和物力成本,深入研究风电机组故障的可预知性是十分有意义的。将故障后维修转为故障前预防,可以有
学位
孤独症谱系障碍疾病(Autism Spectrum Disorder,ASD)是一种常发病于婴幼儿时期的神经发育障碍性疾病,会造成患者的认知能力、表达能力、社交能力受损。目前ASD发病机制尚不明朗,这给临床诊断带来一定的困难,目前主要方式是通过行为观察及量表的评估,诊断结果存在较大的主观性。因此,寻求一种客观且科学的生物标志物实现更加精准地诊断是非常重要的。随着神经影像学的发展,静息态脑电图(El
学位
随着计算机技术和控制理论的不断融合发展,数据量和信息量成爆炸性增长,为了节约网络资源,事件触发控制便得到了广泛的关注。事件触发控制根据设定的触发条件,只有在系统状态超出预定阈值时才使用网络,可在很大程度上减少网络的通信负担,同时保证系统的闭环性能。同时由于网络传输介质的存在,事件触发控制中往往会存在传输延迟的现象。因此,本文将伪预测技术与事件触发控制相结合,研究网络控制系统的事件触发预测控制。主要
学位
同步定位建图(Simultaneous Localization and Mapping,SLAM)是机器人避障的重要技术。传统激光SLAM技术,是在2D平面成像基础上开展移动机器人避障研究。算法性能好,但是成本高昂;多目视觉SLAM技术利用几何结构估计路标点与相机之间的距离,之后再进行定位与避障设计。这种设计价格低,缺点是算法设计复杂;RGB-D SLAM技术通过红外线传感器直接获得深度距离信息
学位
当前,新一轮产业变革突飞猛进,科学技术正在深刻变革。基于激光光谱法的气体检测技术在这样的大环境下迅速发展。激光光谱法是一种实时、环保、非接触式的气体检测手段。本文使用石英音叉(QTF)探测器搭建了基于光诱导热弹性激光光谱(LITES)的气体检测系统,结合石墨烯从紫外到太赫兹波段的宽带光吸收特性,研究了光吸收改性石英音叉对系统性能的提升效果,为微量气体分析与超宽带光学检测提供了一种很有前途的技术策略
学位
离散事件系统(Discrete Event System,DES)是由不规则时间间隔出现的事件序列驱动状态变化的一种动态系统。DES故障诊断指系统故障发生后,通过有限事件的发生诊断出故障发生。大部分的人造系统从逻辑层次上都可以将其抽象为DES,比如通讯系统、自动生产系统、柔性制造系统、交通控制系统等等。但由于现代科技的发展,系统规模日趋扩大,构造也越来越复杂,而故障的出现也日益频繁。故障的出现导致
学位
图像是获取信息的主要方式之一,在图像采集的过程中,由于采集设备及外部条件的影响,导致图像中包含的有效信息较少,并且同一场景很难通过一幅图像收集到该场景的全部信息。因此,将两幅及以上的图像信息融合到一张图,以获得更为全面的场景信息是非常重要的技术,这个信息融合的过程被称为图像融合。其中,多聚焦图像融合技术可以将多幅同一场景不同聚焦区域的图像信息融合得到一幅全聚焦图像,该技术在军事、工业和农业等领域获
学位