论文部分内容阅读
我们的感官系统如何整合来自不同感官通道的信息,从而获得对环境的统一知觉,一直是行为和神经科学研究的热门领域,而该领域中研究得最多的课题则是视听整合。目前,有关视听整合的研究多数都集中于言语感知,提出人脑左后侧的颞上沟在视听整合中起关键作用。该区还能通过反馈投射调整特定通道皮层区(这里指的是视觉运动加工区V5,以及颞上皮层中的听觉相关区域)的活动;除此之外,前额皮层和项区似乎也涉及其中。但是最近的研究表明,由于视觉字母—言语声音之间的特殊联系,字母识别过程中的视听整合与言语感知中的整合不尽相同。深入了解字母识别过程中视听整合的神经机制和特征,能为教育神经科学做出一定贡献,而且这方面的研究对训练语言学习者和语言丧失者学习语言能起到重要作用。
本研究通过一系列实验米考察字母识别过程中视听整合的特点和神经机制。以人们通过长时间学习获得的、彼此之间具有特殊联系的视觉字母和听觉语言为刺激,采用目标识别任务,来考察字母识别过程中视听整合的特点及其所涉及的神经机制,以及空间因素对视觉字母和听觉语音整合效应的影响。实验过程中,要求被试始终注视正中央的注视点,对小概率目标刺激的呈现尽快按键反应,而对于非目标刺激的出现则不按键。本研究欲检验的问题有3个:第一,字母识别过程中,视听整合的行为效应符合同激活模型。第二,左、右视野中的字母视听整合效应存在差异,呈现在右视野的视听刺激更容易被整合。第三,考察空间因素在视听整合中的作用,在视听刺激同步呈现的条件下,视觉字母和听觉语音之间的空间位置一致与否影响其整合效应强度,位置一致的刺激更容易进行整合,而且其整合效应更强。
实验1通过行为实验米验证冗余目标效应符合竞争模型还是同激活模型,从而证明行为水平上是否体现出视听整合效应。结果发现,和单一视觉和单一听觉单独呈现时相比,在视觉和听觉刺激同时呈现的条件下,被试识别字母时的反应时更短、正确率更高,表明视听同时呈现条件下发生了视觉整合。而且,这种反应时促进效应是由于视觉和听觉刺激的同激活产生的交互导致。
在实验2中,采用和实验1类似的字母识别实验范式,分别在左、右视野呈现刺激,考察不同视野中的整合效应是否存在差异。结果发现,当刺激呈现在右视野时,整合差异波中存在两个显著的ERP成分:N136(表征同时呈现的视听刺激调整听觉皮层的激活),以及N262(表征多感官区的视听整合事件);当刺激呈现在左视野时,并没有显著的整合成分出现。该结果表明,呈现在右视野的视听字母更容易被知觉为一个统一的整体,更容易被整合。
实验3通过调控视觉字母和听觉言语之间的空间位置关系,考察空间因素对视听整合的影响。结果发现,对于双差异波来说,存在一个显著的整合成分,该成分在140ms(P140)处达到峰值,显著分布于顶叶区,表征空间位置对多感官区视听整合的影响。这些结果表明,视听整合基于的某些类型的整合神经加工,这些加工有的依赖于视觉和听觉刺激之间的空间一致性。