动态多模态话语的模态协同研究

被引量 : 0次 | 上传用户:haizibooks
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着现代技术的发展,人们使用的交际模态和交际媒体发生了很大变化。人类交际不再是语言独尊的局面,而是由多种模态来共同完成的,包括空间、手势、凝视、身势、移动、音乐、三维事物、口语、书面语、图像、图表等(Baldry&Thibault,2006; O’Hallaran,2004)。这种运用听觉、视觉、触觉等多种感觉,运用语言、图像、声音、动作等多种符号资源进行交际的现象就是多模态话语(张德禄,2009a:24)。近二十年来,国内外许多学者一直密切关注多模态话语分析研究,他们从语言学领域或者语言学之外的其它很多领域对其进行研究。但是,在众多语言学学派的研究方法中,由韩礼德所创立的系统功能语言学所提出的‘社会符号’视角成为主流的研究方法。但是目前多模态话语研究还处于初级阶段,在中国更是如此。大多数的多模态话语研究主要是以Kress和van Leeuwen的视觉语法为理论依据,集中对二维静态多模态语篇进行研究,例如对图画,图形,图表的研究等等。只有极少数的研究是关于动态多模态语篇或者三维静态语篇的,例如对课堂教学,电影,建筑的研究等等。20世纪90年代以来,系统功能符号学者(Lemke,1998; Baldry,2000; Kress&Van Leeuwen,2001; O’Hallaran,2005a,2005b; Martinec&Salway,2005; Baldry&Thibault,2006)开始关注多模态话语中模态间的关系和语法整合问题。尽管目前国内对多模态话语中的不同模态间关系的研究越来越多,但是这些研究仍然存在一些缺陷,缺乏完整性和系统性。大多数的研究集中在对静态多模态话语中模态间的关系的研究上,而对于动态多模态话语中模态间的关系的研究却很少。所以,对动态多模态话语中模态间的协同研究对于多模态话语分析研究的理论,框架和研究方法的完善和发展来说,都有着重要的意义。汉语电视天气预报是一种典型的动态多模态话语。然而,无论是从语言学的研究角度还是从多模态话语分析的研究角度,目前还没有关于汉语电视天气预报的研究。当然,也没有关于汉语电视天气预报多模态话语的模态协同研究和适用于这类动态多模态话语的系统的理论框架的研究。所以,本文关于汉语电视天气预报语篇类型的动态多模态话语的模态协同研究具有重要的意义。它能完善和发展多模态话语分析研究的理论框架和研究方法并且填补多模态话语分析研究在此领域的空白。张德禄(2009a)基于系统功能语言学理论,结合Lim(2004:220-246)在研究图画与语言形成的多模态话语时提供的综合性多符号模式框架,提出了由文化层面、语境层面、内容层面和表达层面四个层面组成的多模态话语分析综合理论框架。为了便于分析电视天气预报语篇,我们参照这个综合理论框架,设计出了动态多模态话语分析框架。并且,我们在互联网上搜集了28篇CCTV1晚间电视天气预报的视频作为研究的语料。此外,我们还基于张德禄(2010c)提出的对录像等动态多模态语篇进行切分三个标准:(1)语篇结构(2)经验意义(3)前景化的事物和特征探讨了视频录像等动态多模态话语的转写方法。通过这种切分方法可以把动态多模态语篇切分成不同层次的分析单位:‘阶段’、‘情节’和‘事件’。为了便于研究电视天气预报多模态话语体裁的语言典型符号分布特征和语料库中不同类型的模态协同关系的研究,‘事件’被定义为最小的动态多模态话语分析的意义单位。本文基于已经探讨的动态多模态话语分析框架和研究方法对28篇CCTV1晚间电视天气预报进行多模态话语分析从而可以发现电视天气预报多模态话语中的模态协同关系和不同模态之间的配合和协同的基本原则。这项研究可以分为两个阶段,第一阶段分析是第二阶段分析的基础,同时后者有效地弥补了前者的不足。在第一阶段,本文采取定量研究和定性研究相结合的研究方法,对已经被以‘事件’为最小意义单位的进行转写的28篇CCTV1晚间电视天气预报动态多模态语篇进行多模态话语分析,旨在探明该体裁中的典型符号分布特征和不同模态间的协同关系的分布特征。在第二阶段,本文基于第一阶段的研究结果,在动态多模态话语分析理论框架内,探讨在电视天气预报多模态话语中的模态协同规律和原则,即不同的模态是怎样相互作用、相互配合来实现话语意义和它为什么会是这样。根据这两个阶段的分析,本研究得出以下结论:第一、在电视天气预报多模态话语中,因需在不同的阶段实现不同的交际目标而选择各类不同的交际模态。在不同的交际阶段为实现不同的交际目标而采用的不同多模态话语交际模式可以分为三种类型:提示开始结束型、提供信息型和求取注意型。其中提示开始结束型又包括提示开始型和提示结束型;提供信息型包括导入型、提供进行中转入提供暂停型和提供进行中转入提供结束型。第二、通过探讨听觉模态和视觉模态之间的协同关系发现,由语言媒体所形成的听觉模态是主模态,视觉模态对听觉模态进行补缺、强化,二者形成互补或者非互补关系。听觉模态和身体媒体所形成的视觉模态之间的协同关系包括强化类型的互补关系和非强化类型的互补关系。听觉模态和非身体媒体所形成的视觉模态之间的协同关系包括强化类型的互补关系、非强化类型的互补关系和情景交互类型的非互补关系。第三、在听觉模态和视觉模态所形成的模态协同关系中互补关系占有最高的比例。互补关系在听觉模态和身体媒体所形成的视觉模态所形成的协同关系中所占的比例是78.64%,在听觉模态和非身体媒体所形成的视觉模态之间的协同关系中所占的比例是77.04%。在听觉模态和非身体媒体所形成的视觉模态之间的协同关系中,情景交互类型的非互补关系所占的比例次之,是22.96%。在听觉模态和非身体媒体所形成的视觉模态之间的协同关系中,无效的视觉模态所占的比例最少,是21.37%。第四、在整个交际过程中,听觉模态是主模态,主导交际进程,始终处于前景化的位置。这是因为听觉模态是线性模态,只能根据时间向前推进,这符合信息获取循序渐进的特点,同时对一些特殊的信息进行突出、强化或者弱化;进行前景化或者背景化。当听觉模态和视觉模态所形成的模态关系为互补关系时,视觉模态处于前景化的位置。当听觉模态和视觉模态之间的协同关系是强化类型的互补关系时,身体媒体所形成的视觉模态或者非身体媒体所形成的视觉模态处于前景化的位置。当听觉模态和视觉模态之间的协同关系是非强化类型的互补关系时,身体媒体所形成的视觉模态和非身体媒体所形成的视觉模态都处于前景化的位置。当听觉模态和非身体媒体所形成的视觉模态之间的协同关系为情景交互类型的非互补关系时,视觉模态处于背景化的位置。总之,本文探讨了动态多模态话语分析框架和动态多模态话语的转写等研究方法;并且研究了CCTV1晚间电视天气预报多模态话语中的模态协同关系的分布特征;此外,还研究了在CCTV1晚间电视天气预报多模态话语中的模态协同规律和原则,即不同的模态是怎样相互作用、相互配合来实现话语意义和它为什么会是这样。它不仅在理论和应用上丰富了和发展了多模态话语分析研究,还为动态多模态话语分析的研究提供了新的视角。
其他文献
在现代科研、通信系统、教学试验以及各种电子测量技术中,常常离不开一个高精度、频率可调的信号源,并且要求由数字信号来控制,这就是数字式频率合成器。频率合成虽不是一项
利用巴中市近三年的空气质量数据,通过分析以查明春节期间的空气污染水平和大气颗粒物污染特征。研究结果表明:大年除夕和初一对PM2.5浓度的升高影响最大,PM2.5浓度平均值约
2015年7月,经中央全面深化改革领导小组审议,全国人大常委会授权北京、内蒙古等13个省、自治区、直辖市开展公益诉讼试点工作。为贯彻落实党的十八届四中全会改革部署和全国人
报纸
功率放大器作为发射机末端重要的部件之一,消耗了发射机大部分功率。特别是现代无线通信速率高,发射信号峰均比较大,为了满足一定信号质量的条件下,功率放大器的效率更低,消
<正>特别的教材,传递特别的幸福感陈秋梅如今的教材,大多都板着脸说知识,显得"面目可憎",难得有一本能让学生一看见就喜欢的教材。由中国科学院心理研究所编写的《我的影像成
光纤激光器凭借阈值低、效率高、光束质量好、结构紧凑、可靠性高以及散热性好等优点,受到普遍关注。掺铥光纤激光器在1800~2100nm波长可选,使其在医学、生物学、超快光学、眼
本文运用图表、归纳等方法对唐代山南道进行了系统、全面的研究,共分八章,主要观点如下:本文前三章,对唐代山南地区的行政区划演变、自然环境、交通状况、地域形势、人口分布
激光与金属相互作用会因入射激光功率密度的不同而产生升温,熔融,气化等不同现象。温度场是研究激光和金属相互作用机理的一个重要方面,研究激光与金属作用的温度场在激光精
我国高职院校经过多年的发展取得了一定的成就,但在新的历史条件下,其面临的形势将不容乐观,高等职业院校要想生存和发展,就必须要不断地提高自身的竞争力。通过分析高职教育
为实现BIM技术预测功能,采用可靠性理论、概率方法理论,考虑施工过程及进度影响因素的不确定性,分析了目标进度和预测进度的复杂关系,建立了施工进度随机预测模型。特别考虑