多模态话语分析的新发展——《多模态互动分析》述评
管 乐
(中山大学南方学院, 广东广州 )
摘 要:随着多模态话语分析的发展,著名语言学家Norris 在吸收了互动社会学、中介话语分析和联结分析以及多模态话语等方面的研究成果的基础上,撰写了著作《多模态互动分析》。该书以定性分析为主要研究方法,以动态视频录像为研究对象,对交际主体如何通过“言语”、“空间距离”、“身体姿势”、“手部动作”、“头部动作”、“眼神”、“音乐”、“印刷物”、“场景布局”这九种主要交流模态进行了详细的分析,初步构建了多模态互动分析的基本框架。该书不仅在理论和应用上丰富和发展了多模态话语分析研究,还为动态语篇的多模态话语分析研究提供了新的视角,也拓展了多模态互动分析理论研究的范围。
关键词:多模态话语分析;多模态;互动
中图分类号:H0 文献标识码:A 文章编号:2095-4891(2017)01-0085-06
1. 引言析和联结分析(nexus analysis)以及多模态话语等 随着现代技术的发展,多模态话语冲击了传方面的研究成果,其中包括从互动社会学中吸收统上文字在交际领域中的中心地位。在许多情况的“实时”(real time)互动和 “使用中的语言”下,语言与其它符号模态资源一起构建意义,共(language in use)概念、中介话语中强调的“中介同为交际服务。随着多模态话语研究的深入,行为”以及从多模态研究中吸收的重视音乐、颜Jewitt (2009)认为多模态话语分析初步形成了以色和手势等其他符号的观点。Norris 认为人类所下三种理论方法:即以Gunther Kress 和van 有互动都是多模态的。此书以定性分析为主要研Leeuwen 为代表的系统功能多模态话语分析究方法,以动态视频录像为研究对象,对交际主(systemic functional-multimodal discourse analysis) 体如何通过多种模态进行互动交流进行了详细的或系统功能符号学(s y st e m at i c fu n ct i o n a l 分析,强调人们在行动中所体现的所有模态。同semiotics )、以Norris 为代表的多模态互动分析时Norris 还提出了模态密度前景——背景连续体(multimodal interactional analysis)以及Gu 提出的语(modal density foreground-background continuum) 料库语言学多模态话语分析。的分析框架,此框架对分析复杂的人际互动有重《多模态互动分析》(Analyzing Multimodal 要的指导作用。该书初步构建了多模态互动分析Interaction )一书是由著名语言学家Norris 于2004的理论,但国内尚未见到对此书的评述,只有少年撰写的,该书吸收了互动社会学、中介话语分数评介多模态话语分析的文章提到了此书,本文基金项目:本文系2015年广州市哲学社会科学发展“十二五”规划课题“基于多模态话语分析理论的大学英语微课教学研
究与实践(项目编号:15G76);2015年广东高校重大项目:青年创新人才类项目(社科类)课题“基于动态演讲视频的多模态互动机制研究”(项目编号:2015WQNCX190) 的阶段性研究成果。
作者简介:管乐,讲师,硕士;研究方向:外国语言学及应用语言学
通讯地址:510970广州从化温泉镇中山大学南方学院国际学院
85
在介绍该书内容的基础上,对该书进行详细的评
述并指出其不足之处。构成,低一级行动和高一级行动在互动中被连贯地建构起来;冰冻行动属于高一级行动,包括交
际事件发生的环境和环境中存在的物体。然后作
者介绍了多模态互动框架中的九种交流模态
(communicative modes)。交流模态是带有规律和
规则的意义表达体系或符号体系(Norris ,2009:2. 主要内容 该书共八章。在每一章的开头,作者用方框单独列出了该章提到的重点术语及概念,有利于
读者更快地了解本部分介绍的重点内容和概念。
在介绍完重点内容后,作者还给读者布置了思考
题,目的是让读者从多模态的角度去分析互动是
怎样产生的。该书语言通俗易懂,运用了大量的
实例来验证多模态互动框架的可行性,是多模态
话语研究者的必读书籍。
第一章 ,主要指出了多模态互动具有普遍
性,即人类的互动都具有多模态特征。作者认为
人类互动是通过各种模态的中介作用而开展的社
会行动。言语模态和非言语模态(包括手势、姿
势、距离、眼神等)在人际交流中都能体现互动
意义( interactional meaning),每种模态都是一套
符号系统。言语模态和非言语模态在不同的互动
背景中作用不一样,比如言语模态并不是在所有
互动中都起主导作用。在本章中作者还提出了多
模态互动分析的三个重要观点:第一个观点是在
多模态互动分析中,语言、手势、姿势、眼神和
物体等不同交流模态是通过不同方式构建的;第
二个观点是在多模态互动分析中,不同交流模态
具有不同的物质性(materiality ),比如言语既看不
见又具有不持久性,但是具有可听的物质性;第
三个观点是在多模态互动分析中,需要把互动分
析与个人的意识(awareness )分析结合起来。人类
互动的多模态分析要考虑到交际主体及参与者的
意识或注意的程度,因此作者提出了互动意识
(interactional awareness)和注意(attention )这两个术
语。在多模态互动分析中需要关注的问题是交际
主体及参与者表达的感情、思想和看法以及在互
动中传递什么信息、参与者在特定的互动过程中
是如何反应的。在此章中作者还运用警察在学校
十字路口指挥交通的例子说明了在人类互动中人
的认知能力(注意或意识)的不同表现,最后作者
介绍了本书的结构。
第二章,作者首先指出多模态互动的基本分
析单位“行动”(action ),行动总共分为三个部
分,即低一级行动(low-level action)、高一级行动
(high-level action)和冰冻行动(frozen action)。人
类互动被看作是一个交际事件,整个交际事件可
以分成若干个阶段,各阶段都由一系列高一级行
动构成,每一个高一级行动由一系列低一级行动79) 。这九种模态分别是语言模态(s p o k e n language )、空间距离(proxemics )、身体姿势(posture )、手部动作(gesture )、头部动作(head movement )、眼神(gaze )、音乐(music )、印刷物(print )和场景布局(layout )。作者认为互动是通过这些交流模态的协同使用而完成的。作者在介绍每一个交流模态的同时都分别用实例分析说明了以上九种交流模态的特点以及在互动中所起的重要作用。 第三章 ,作者探讨了该书的研究方法即多模态转录和视频分析的方法,并指导读者如何完成整个交际过程的转录。其过程首先是完成单个交流模态的转录,然后把出现的两个或多个交流模态的转录过程整合起来,最后把所有交流模态的转录内容结合起来完成整个部分的转录。在本章中作者还结合大量实例对第二章介绍的九种交流模态进行分析,作者发现在转录的视频中多种交流模态在图像中重复出现,说明了互动过程的复杂性。第四章,是该书的重点。在本章中,作者提出了“模态密度”(modal density)和“模态结构”(modal configuration)两个重要概念。模态密度是多模态互动研究的关键内容(Norris ,2009:80),指的是高一层级行为构建时的模态强度或模态复杂性。模态密度通过模态强度(modal intensity)和模态复杂性(modal complexity)实现。模态强度是指通过高强度地使用某个或某些模态来构建一个行为,根据在构建“高一级行动”中所起的作用,模态强度包括高模态强度(h ig h m o dal intensity )、中模态强度(medium modal intensity)和低模态强度(low modal intensity)三个部分,任何模态都能体现高模态强度,有时多种模态结合起来也能体现高模态强度,模态强度越高,模态密度就越大。模态复杂性是指“社会行动者”(social actor) 构建行为时所使用的模态数量,模态数量越多,模态复杂性就越强,比如妈妈边看电视边织毛衣时体现的眼神、手势、姿势等各种模态都能体现意义,模态的复杂性强(Norris ,2007:61)。Kress 和van Leeuwen(2001)指出每一种模态都具有交际功能,模态之间总是不断地相
86
互联系和相互影响的。Norris (2004)提出了另外意或意识程度(Norris ,2004:114)。交流语义结一个重要概念是模态结构。模态结构是指在构建构主要是由凸显的(pronounced )一系列低一级行高一层行动中各模态之间所体现的平等或者上下动组成的,作者把凸显的一系列低一级行动称为级的关系,比如以上妈妈边看电视边织毛衣的例手段(means ),手段起着组织和衔接前景化行动子,眼神手势和姿势的地位高于听觉模态。的作用。参与者运用一系列不同的低一级行动来Norris 还指出模态强度还与社会行为者的交际情建构高一级行动的前景化,由此可以体现出参与景和环境有关,比如音乐对于舞蹈演员来说属于者的注意或意识程度。交流语用学是指在实时高模态强度,但是对于交流的其他社会活动者来(real-time )交际中,参与者是如何使用一系列低说,音乐就不属于高模态强度。在本章的最后,一级行动来完成交际活动的(Norris ,2004:作者还提出了模态强度与社会行为者的“注意”114) 。最后作者还运用了实例来说明高一级行动(attention )和“意识”(awareness )之间的关系,如前景化过程中所体现的语义和语用功能。
高模态强度相当于互动注意或意识(interac-tional 第七章,作者指出模态密度前景——背景连attention/awareness)的高一级行动。续体理论能将互动与意识有效地联系起来,认为
第五章,作者用实例说明了在交际中如何判交际主体能将同时发生或有序发生的一系列高一断参与者的“注意”和“意识”的不同程度。在级行动构建起来,这一框架为参与者在交际中运“高一级行动”中,根据交际主体对模态的注意用多种模态进行定性分析提供了有力的理论支撑和意识程度的不同,Norris 提出了前景化(fore-(Norris ,2004:128)。本章的重点是运用模态密ground )、中景化(mid-ground )和背景化(back-度前景——背景连续体理论框架分析复杂多模态ground )三个概念。使用模态密度高,最受行动者互动的整个过程,并描述多种共时进行的高一级注意的“高一级行动”是前景化行动;使用模态行动,其中包括各种交流模态的体现、模态密度密度低,最不受行动者注意的“高一级行动”是的分析、交际主体注意和意识程度的切分以及高背景化行动或中景化行动。前景化、中景化和背一级行动的前景化过程中所体现的语义和语用功景化区别了人们在交际中体现的注意/意识的程能。作者还结合具体实例验证了该理论框架的可度。Norris (2004:97)指出根据事件发生的不同行性。研究发现在复杂的多模态互动过程中,各阶段和个人意识表现的不同程度,人类互动被看种交流模态之间存在相互依赖(interdependence ) 作是一系列高一级行动的构建。前景化、中景化的关系,而不是相互独立的(independence );交际和背景化这三个阶段不是孤立存在的,因此作者主体高一级行动的转变会引起其他参与者高一级提出了模态密度前景—背景连续体分析框架,这行动的变化;交际主体参与高一级行动的同时也一框架为研究在交际中某一特定时刻同时发生的建构了社会世界(social world )(Norris ,2009:高一级行动提供了理论基础。基于该框架作者论137)。
证了六种同时发生的前景化高一级行动的实例。第八章,是该书的总结部分。在本章中,作最后,为了更清楚地描述建构高一级行动时行动者再次总结了该书出现的重要术语和概念,包括者运用的交流模态,Norris 提出了模态密度圈互动的概念、模态密度、前景背景连续体,并指(modal density circles)这一概念。在模态密度圈出了模态密度前景——背景连续体理论分析框架中,各交流模态都使用点状间断式的圆圈来表的可行性和局限性。同时从不同的分析领域对本示,点状间断式圆圈表明模态是没有界限的单书研究的方向提出了新的想法。从应用语言学的位。在具体交际事件中如果以一种模态为主,这角度,作者指出在互动中需要对语言所起的作用种模态越重要,其模态密度圈越大,反之越小。以及交际中使用的模态进行分析;从教育的角模态密度圈有利于人们更清楚地了解社会行为者度,在学习过程中对学生使用哪种模态更加有效在构建高一级行动时所运用的各种交流模态及其进行了研究;从社会学的角度,提出了高一级行重要性。动和交际主体两者之间的关系;从人类学的角
第六章,作者提出了交流语义学(communi-度,在不同的文化背景下,交际主体互动的差异cative semantics )和交流语用学(communicative 是什么?从儿童发展的角度,不同注意或意识程pragmatics )两个重要概念。交流语义学是指同时度对儿童习得的交际能力有什么影响?从心理学发生或按序建构的复杂互动意义的系统组织,目的角度,互动可以把人的意识、认知与心智结合的是指出在一系列高一级行动中人们表现出的注起来研究。最后,作者对如何构建人物身份和人
87
物关系提出了自己的构想。语分析研究,还为动态语篇的多模态话语分析的
研究提供了新的视角,也拓展了多模态互动分析
理论研究的范围。因此,该书对多模态话语分析
理论的完善和发展具有重要意义。3. 影响 该书出版十余年来,在学术界产生了深远影
响:(1)丰富和拓展了多模态话语分析理论研究
的对象,为动态语篇的多模态话语研究奠定了理
论基础。O ’Toole (1994)、Kress 和van Leeuwen
(1996, 2001) 主要是从图像社会符号学分析的角
度来研究静态的视觉平面图像,Norris (2004)多
模态互动分析的研究对象侧重于动态的多模态话
语即动态的视频录像。模态密度前景—背景连续
体理论分析框架为分析动态语篇的多模态互动研
究提供了坚实的理论基础,通过该理论框架可以
更有效地探究动态语篇中交际事件的不同阶段及
其模态选择和各模态使用的强度和密度的差异,
同时该框架也有助于分析在交际过程中交际主体
和参与者是如何将单独的片段信息(separate 4. 启示 Norris (2004)提出的多模态互动分析理论受到Scollon (1998, 2001)关于中介话语分析和联结分析的影响,Ron Scollon 认为人类行动(human action )包括三个方面的原则,即社会行动(social action )、交流(communication )和历史(history ),由此Norris 提出了行动(action )为多模态互动研究的基本单位,这为了解整个交际事件的发展过程奠定了坚实基础。Norris 认为,人类互动是人类以各种形式的模态作为“中介的行动”(mediated action ),在整个交际事件中都可以辨认出其体现的“行动”过程和阶段,通过对模态的注意或意
识程度的切分,人类互动的过程是能够辨认出阶
段来的,“高一级行动”描述了整个交际事件的
主要内容及其所处的阶段,“低一级行动”是构
成高一级行动的重要部分,在整个交际事件发展
的各个阶段正是由各种模态协同执行的一系列前
景化高一级行动构成的,同一交际事件的其他高
一级行动仍然存在于社会行动者的意识或注意
里,只是被“背景化”或“中景化”了。该书中
作者不仅介绍了交际事件中模态的构成,还通过
模态密度区分了交际主体参与的一系列高一级行
动与其体现的意识或注意程度,交际主体的意识
或注意对构建其他高一级行动具有结构作用,一
旦确定了高一级行动,就可以根据交际主体意识
或注意的变化,进一步研究一个高一级行动是如
何影响另一个高一级行动的。在整个交际事件
中,各个阶段之间的变化存在过渡,这一部分可
使用言语或其他模态来实现。
近20年来,在人际互动中,话语分析已经从
单纯的语言研究扩展到包括语言在内的多种模态
使用的研究,即多模态话语分析。Norris 多模态
互动研究与Kress 与van Leeuwen(2001)的研究不
同,认为互动是通过“言语”,“空间距离”、
“身体姿势”、“手部动作”、“头部动作”、
“眼神”、“音乐”、“印刷物”和“场景布局”
这九种主要交流模态的协同使用进行的,这九种
主要交流模态是多模态互动分析的核心,Norris
把这九种交流模态分为表征模态(embodied mode)
和非表征模态(disembodied mode)。表征模态是交际主体在交流过程中表现出的模态,如语言、姿
message )整合构建起来表达完整的信息的。基于多模态互动分析理论,张佐成等(2015)分析了商务会议、电视访谈、学术演讲、商务谈判等不同类型的多模态即席话语,研究发现多模态即席话语模态之间存在互补、反向互补、非互补三种互动机制,比如商务会议和商务谈判中音韵特征和手部动作对语言模态表达意义所起的强调作用以及在学术演讲中语言模态表达的负面信息。(2) 借助该理论框架,我们还可以清楚地了解到交际主体是如何构建一系列高一级行动的,这一系列高一级行动是怎样列入前景——背景连续体与其他行动产生联系的。张德禄和王正(2016)在Norris 多模态互动理论的基础上,提出了多层次多模态互动分析的综合理论框架,并将该理论框架运用到一堂大学英语课的多模态互动分析中,研究发现教学活动是师生注意的焦点,属于高一级行动,教师的口语模态是占据统治地位的模态,注视、手势和身体姿势与口语模态为协同关系,教师宣布活动指示和教师的检查活动效果阶段属于高模态密度活动。(3)多模态互动课堂教学模式研究成为了课堂教学研究的热点。刘秀丽等(2013)结合Norris 多模态互动理论,探讨了外语教师多模态话语与学生学习积极性的关系,研究发现在师生交流时,教师在教学中会运用多种手段(means )将学生的注意力从一个高一级行动转为另一个高一级行动,研究结果证明多模态互动分析理论有利于帮助发现课堂教学中出现的问题,对增强教学效果有重要的指导作用。总之,该书不仅在理论和应用上丰富和发展了多模态话
88
势、眼神等。非表征模态是交际主体在交流过程义,同时还忽视了在互动中交流主体所体现的社中没有表现出的模态或互动交际中的物质世界,会身份。Norris 的分析方法主要关注的是“内容如场景布局、背景音乐等。这两种模态类型的分层”(content layer),即摄像机采集到的人际互动类体现了在人际互动中交际主体和参与者运用的的视频图像,没有提出一套详尽的对多模态话语各种模态类型以及这些模态在构建人际互动中所进行切分处理的方法。
起的不同作用。 此外,话语分析往往把语境作为言语发生的 Norris 在书中指出人类的所有互动都具有多背景,借用语境因素来解释各种言语的特点。在模态特征,人类互动作为一种社会行为包括语言多模态话语研究中,模态只有通过根据所处的语使用和其他模态的使用,同时需要借助各种模态境以及所代表的对象(实体、过程、概念等)才能作为中介来进行,人类互动还是一个连续的动态实现意义(张佐成,2015:200)。在该书中,过程,每一种模态都是一套符号系统,表达其特Norris 虽然谈到了语境是语言以外的一切事物定意义和潜在意义。在人际互动过程中,根据模(Norris ,2009:149),即语言之外的模态被当作语态使用的程度,Norris 还提出了“模态密度”,境,语境和语言模态共同作用作为表达意义的资“模态强度”和“模态复杂性”等重要概念,这源,背景化的高一级行动实际上是前景化行动的些概念的提出对多模态话语研究者了解人际互动语境,有时候前景化的行动会转变为中景化和背中模态的重要性以及模态之间的关系有重要意景化的行动,成为新的前景化行动的语境,但是义。Norris 认为在人类互动中言语模态并不是总却没有把语境单独列为一个分析层次来进行研起主导作用,人际互动体现了辨认的类型,每个究,没有突出语境在整个人际互动中所起的重要类型都有可辨认的过程,过程的实现可以通过模作用。从研究方法上来看,该书主要是以定性研态的使用来观察。同时每个模态都有其起点、持究的方法分析多模态互动,Norris 认为模态具有续阶段和结束阶段的发展过程,这对研究互动过不可数性,这是值得推敲的问题。随着科技的发程中模态发展的整个过程有重要的指导意义。从展,ELAN 等多模态分析软件工具的开发和使用理论上来看Norris (2004)多模态互动理论拓展了可以用来分析交际主体所表现出来的各种交流模人类互动的内涵,丰富和发展了多模态话语分析态,还可以对视频文件进行多层级同步标注,在理论。以后的研究中我们可以运用定性和定量分析相结
合的研究方法,对多模态互动中的各交流模态的
5. 不足之处关系进行更加详细和精确的研究分析。
首先,该书提出了模态间自下而上即从低一
级行动到人际互动事件的分析层次,从模态密度6. 结语
和模态复杂性的角度对模态的重要性和模态使用 《多模态互动分析》一书语言通俗易懂、结构的主次方面进行了分析,但是没有对各交流模态清晰、内容充实、论证合理。该书是一本研究人在使用过程中产生的意义进行分类。其次该书只际互动中多模态话语分析的实用指南,同时对语涉及到交际主体与参与者在交际事件中各模态之言学,社会学、教育学、人类学和心理学等其他间的互动关系,没有考虑到视频图像中交际主体学科在这方面的研究具有重要的指导作用。乔治与观看者之间的互动关系。该书选取的研究对象城大学Ron Scollon教授在序言中评价该书将成为即视频录像涉及的范围比较窄,主要是围绕生活研究人类多模态互动的一本重要的参考书。该书中朋友之间、师生之间以及医生和患者之间的多中提出的模态密度前景——背景连续体多模态互模态话语,没有对不同文体风格的动态语篇进行动分析框架为多模态话语分析提供了新的视角,多模态互动分析,如现场商务谈判和现场演讲视对研究多模态话语分析提供了新的启示,特别是频等,如果能增加不同风格的多模态语篇的分对动态语篇的多模态互动研究提供了坚实的理论析,论证的主体部分将更具说服力。基础。在国内,以Gunther Kress和Van Leeuwen 其次,该书指出了在交际事件中各交流模态为代表的系统功能多模态话语分析取得了很多成之间相互依赖的关系,但是没有明确指出其他的果,但是以Norris 为代表的多模态互动分析理论互动关系如强化、弱化等。该书只关注交际主体的应用尚未得到应有的重视,笔者希望在以后的在互动中产生的情感、观点和想法,没有重视各研究中能更多地运用该理论来研究多模态话语和交流模态的运用对构建交际事件所起的社会意多模态语篇,以拓展了多模态互动分析理论的研
89
究范围,并通过不断的实践来验证该理论可行性和可发展性,推动多模态话语研究的发展。参考文献:
[1] Jewitt, C. 2009. The Routledge Handbook of MultimodalAnalysis [M]. London and New York: Routledge.
[2] Kress, G & T. Van Leeuwen. 1996. Reading Images: TheGrammar of Visual Design[M] . London: Routledge.
[3] Kress,G & T.Van Leeuwen. 2001. Multimodal Discourse: TheModes and Media of Contemporary Communication [M].London: Arnold.
[4]Norris, S. 2004. Analyzing Multimodal Interaction: A Methodological Framework[M]. New York: Routledge.
[5]Norris, S. 2007. The micropolitics of personal and ethnicityidentity [J]. Discourse and Society, (5): 653-674.
[6]Norris,S. 2009. Modal density and modal configurations:Multimodal action[A]. In C. Jewitt (ed.). The Routledge Handbook of MultimodalAnalysis [C]. London: Routledge.
[7] O’Toole, M. 1994. The language of Displayed Art [M]. London:Leicester University Press.
[8] Scollon, R. 1998. Mediated Discourse as Social Interaction[M].London: Longman.
[9] Scollon, R. 2001. Mediated Discourse: The Nexus of Practice
[M]. London: Routledge.
(上接第80页)
参考文献:
[1] Barrett, L. 2001.“How the Dead Speak to the Living”:Intertextuality and the Postmodern Sublime in White Noise
[J]. Journal of Modern Literature, (25/2): 97-113.
[2] DeCurtis, A. 2005. “An Outsider in This Society”: Aninterview with Don DeLillo [A]. In Thomas DePietro (ed.).Conversations with Don DeLillo [C]. Jackson: UP of Mississippi.
[3] Harack, K. 2013. Embedded and embodied memories: Body,space, and time in Don DeLillo’s White Noise and FallingMan [J]. Contemporary Literature, (2): 303-336.
[4] Heise, U. 2008. Sense of Place and Sense of Planet: The Environmental Imagination of the Global[M]. New York:Oxford niversity Press.
[5] 鲍德里亚,2008.刘成富,全志钢译.消费社会[M].南京:南京大学出版社.
[6] 陈振明.1992.法兰克福学派与科学技术哲学[M].北京:中国人民大学出版社.
[7] 程静 贾德江.2010.《白噪音》:现代技术元叙事和技术责任主体的缺失[J].解放军外国语学院学报,(6):96-100.
[8] 德里罗.2013.朱叶译.白噪音[M].南京:译林出版社.
[9] 弗洛姆.2002.刘海林译.逃避自由[M].北京:国际文化出版社.[10] 刘秀丽 张德禄 张宜波.2013.外语教师多模态话语与学生学习积极性的关系研究[J].外语电化教学,(5):3-9.[11] 张佐成等.2015.多模态即席话语研究[M].世界图书出版公司.[12] 张德禄 王正.2016.多模态互动分析框架探索[J].中国外语,(2):54-61.A New Development of Multimodal Discourse Analysis—A Review on Multimodal Interaction AnalysisAbstract :With the development of multimodal discourse analysis,the famous linguist Norris wrote Multimodal Interaction Analysisbased on interactional sociolinguistics, mediated discourse andnexus analysis and multimodality. This book applies a qualitativeanalysis as the main research method and the dynamic video asthe research object. By the detailed analysis of the nine communicative modes, namely spoken language, proxemics,posture, gesture, head movement, gaze, music, print and layout,it builds the basic framework of multimodal interaction analysis.This book not only enriches and develops the multimodal discourseanalysis theory both theoretically and practically, but also providesa new perspective for the study of dynamic multimodal discourseanalysis and expands the scope of the study of multimodal interaction analysis theory.Key Words: multimodal discourse analysis; multimodal; interaction[10] 霍克海默 阿多尔诺.2006.梁敬东.启蒙辩证——哲学片段[M].上海:上海人民出版社.[11] 马尔库塞.2008.刘继译.单向度的人:发达工业社会意识形态研究[M].上海:上海译文出版社.[12] 朱新福.2005.《白噪音》中的生态意识[J].外国文学研究,(5):109-114.Disappearing Man: The Ethical Thoughts of Science and Technology in White NoiseAbstract : Based on the critical theories of the Frankfurt Schoolabout science and technology, this thesis focuses on the study ofDon DeLillo’s ethical thoughts of science and technology in hisrepresentative novel White Noise. Through analyzing DeLillo’s depictions of sci-tech worship, dominance and apocalypse, thisthesis expounds his critical thoughts on technological rationality,alienation and risks. In White Noise, DeLillo shows the co-existingrelationship between technology and humanity, reveals that moderntechnology, as an“invisible hand”, exerts great influence onmankind, and crystallizes the disaster hidden behind the myth ofscience and technology.Key Words: White Noise; DeLillo; science and technology; ethics;postindustrial society
90
多模态话语分析的新发展——《多模态互动分析》述评
管 乐
(中山大学南方学院, 广东广州 )
摘 要:随着多模态话语分析的发展,著名语言学家Norris 在吸收了互动社会学、中介话语分析和联结分析以及多模态话语等方面的研究成果的基础上,撰写了著作《多模态互动分析》。该书以定性分析为主要研究方法,以动态视频录像为研究对象,对交际主体如何通过“言语”、“空间距离”、“身体姿势”、“手部动作”、“头部动作”、“眼神”、“音乐”、“印刷物”、“场景布局”这九种主要交流模态进行了详细的分析,初步构建了多模态互动分析的基本框架。该书不仅在理论和应用上丰富和发展了多模态话语分析研究,还为动态语篇的多模态话语分析研究提供了新的视角,也拓展了多模态互动分析理论研究的范围。
关键词:多模态话语分析;多模态;互动
中图分类号:H0 文献标识码:A 文章编号:2095-4891(2017)01-0085-06
1. 引言析和联结分析(nexus analysis)以及多模态话语等 随着现代技术的发展,多模态话语冲击了传方面的研究成果,其中包括从互动社会学中吸收统上文字在交际领域中的中心地位。在许多情况的“实时”(real time)互动和 “使用中的语言”下,语言与其它符号模态资源一起构建意义,共(language in use)概念、中介话语中强调的“中介同为交际服务。随着多模态话语研究的深入,行为”以及从多模态研究中吸收的重视音乐、颜Jewitt (2009)认为多模态话语分析初步形成了以色和手势等其他符号的观点。Norris 认为人类所下三种理论方法:即以Gunther Kress 和van 有互动都是多模态的。此书以定性分析为主要研Leeuwen 为代表的系统功能多模态话语分析究方法,以动态视频录像为研究对象,对交际主(systemic functional-multimodal discourse analysis) 体如何通过多种模态进行互动交流进行了详细的或系统功能符号学(s y st e m at i c fu n ct i o n a l 分析,强调人们在行动中所体现的所有模态。同semiotics )、以Norris 为代表的多模态互动分析时Norris 还提出了模态密度前景——背景连续体(multimodal interactional analysis)以及Gu 提出的语(modal density foreground-background continuum) 料库语言学多模态话语分析。的分析框架,此框架对分析复杂的人际互动有重《多模态互动分析》(Analyzing Multimodal 要的指导作用。该书初步构建了多模态互动分析Interaction )一书是由著名语言学家Norris 于2004的理论,但国内尚未见到对此书的评述,只有少年撰写的,该书吸收了互动社会学、中介话语分数评介多模态话语分析的文章提到了此书,本文基金项目:本文系2015年广州市哲学社会科学发展“十二五”规划课题“基于多模态话语分析理论的大学英语微课教学研
究与实践(项目编号:15G76);2015年广东高校重大项目:青年创新人才类项目(社科类)课题“基于动态演讲视频的多模态互动机制研究”(项目编号:2015WQNCX190) 的阶段性研究成果。
作者简介:管乐,讲师,硕士;研究方向:外国语言学及应用语言学
通讯地址:510970广州从化温泉镇中山大学南方学院国际学院
85
在介绍该书内容的基础上,对该书进行详细的评
述并指出其不足之处。构成,低一级行动和高一级行动在互动中被连贯地建构起来;冰冻行动属于高一级行动,包括交
际事件发生的环境和环境中存在的物体。然后作
者介绍了多模态互动框架中的九种交流模态
(communicative modes)。交流模态是带有规律和
规则的意义表达体系或符号体系(Norris ,2009:2. 主要内容 该书共八章。在每一章的开头,作者用方框单独列出了该章提到的重点术语及概念,有利于
读者更快地了解本部分介绍的重点内容和概念。
在介绍完重点内容后,作者还给读者布置了思考
题,目的是让读者从多模态的角度去分析互动是
怎样产生的。该书语言通俗易懂,运用了大量的
实例来验证多模态互动框架的可行性,是多模态
话语研究者的必读书籍。
第一章 ,主要指出了多模态互动具有普遍
性,即人类的互动都具有多模态特征。作者认为
人类互动是通过各种模态的中介作用而开展的社
会行动。言语模态和非言语模态(包括手势、姿
势、距离、眼神等)在人际交流中都能体现互动
意义( interactional meaning),每种模态都是一套
符号系统。言语模态和非言语模态在不同的互动
背景中作用不一样,比如言语模态并不是在所有
互动中都起主导作用。在本章中作者还提出了多
模态互动分析的三个重要观点:第一个观点是在
多模态互动分析中,语言、手势、姿势、眼神和
物体等不同交流模态是通过不同方式构建的;第
二个观点是在多模态互动分析中,不同交流模态
具有不同的物质性(materiality ),比如言语既看不
见又具有不持久性,但是具有可听的物质性;第
三个观点是在多模态互动分析中,需要把互动分
析与个人的意识(awareness )分析结合起来。人类
互动的多模态分析要考虑到交际主体及参与者的
意识或注意的程度,因此作者提出了互动意识
(interactional awareness)和注意(attention )这两个术
语。在多模态互动分析中需要关注的问题是交际
主体及参与者表达的感情、思想和看法以及在互
动中传递什么信息、参与者在特定的互动过程中
是如何反应的。在此章中作者还运用警察在学校
十字路口指挥交通的例子说明了在人类互动中人
的认知能力(注意或意识)的不同表现,最后作者
介绍了本书的结构。
第二章,作者首先指出多模态互动的基本分
析单位“行动”(action ),行动总共分为三个部
分,即低一级行动(low-level action)、高一级行动
(high-level action)和冰冻行动(frozen action)。人
类互动被看作是一个交际事件,整个交际事件可
以分成若干个阶段,各阶段都由一系列高一级行
动构成,每一个高一级行动由一系列低一级行动79) 。这九种模态分别是语言模态(s p o k e n language )、空间距离(proxemics )、身体姿势(posture )、手部动作(gesture )、头部动作(head movement )、眼神(gaze )、音乐(music )、印刷物(print )和场景布局(layout )。作者认为互动是通过这些交流模态的协同使用而完成的。作者在介绍每一个交流模态的同时都分别用实例分析说明了以上九种交流模态的特点以及在互动中所起的重要作用。 第三章 ,作者探讨了该书的研究方法即多模态转录和视频分析的方法,并指导读者如何完成整个交际过程的转录。其过程首先是完成单个交流模态的转录,然后把出现的两个或多个交流模态的转录过程整合起来,最后把所有交流模态的转录内容结合起来完成整个部分的转录。在本章中作者还结合大量实例对第二章介绍的九种交流模态进行分析,作者发现在转录的视频中多种交流模态在图像中重复出现,说明了互动过程的复杂性。第四章,是该书的重点。在本章中,作者提出了“模态密度”(modal density)和“模态结构”(modal configuration)两个重要概念。模态密度是多模态互动研究的关键内容(Norris ,2009:80),指的是高一层级行为构建时的模态强度或模态复杂性。模态密度通过模态强度(modal intensity)和模态复杂性(modal complexity)实现。模态强度是指通过高强度地使用某个或某些模态来构建一个行为,根据在构建“高一级行动”中所起的作用,模态强度包括高模态强度(h ig h m o dal intensity )、中模态强度(medium modal intensity)和低模态强度(low modal intensity)三个部分,任何模态都能体现高模态强度,有时多种模态结合起来也能体现高模态强度,模态强度越高,模态密度就越大。模态复杂性是指“社会行动者”(social actor) 构建行为时所使用的模态数量,模态数量越多,模态复杂性就越强,比如妈妈边看电视边织毛衣时体现的眼神、手势、姿势等各种模态都能体现意义,模态的复杂性强(Norris ,2007:61)。Kress 和van Leeuwen(2001)指出每一种模态都具有交际功能,模态之间总是不断地相
86
互联系和相互影响的。Norris (2004)提出了另外意或意识程度(Norris ,2004:114)。交流语义结一个重要概念是模态结构。模态结构是指在构建构主要是由凸显的(pronounced )一系列低一级行高一层行动中各模态之间所体现的平等或者上下动组成的,作者把凸显的一系列低一级行动称为级的关系,比如以上妈妈边看电视边织毛衣的例手段(means ),手段起着组织和衔接前景化行动子,眼神手势和姿势的地位高于听觉模态。的作用。参与者运用一系列不同的低一级行动来Norris 还指出模态强度还与社会行为者的交际情建构高一级行动的前景化,由此可以体现出参与景和环境有关,比如音乐对于舞蹈演员来说属于者的注意或意识程度。交流语用学是指在实时高模态强度,但是对于交流的其他社会活动者来(real-time )交际中,参与者是如何使用一系列低说,音乐就不属于高模态强度。在本章的最后,一级行动来完成交际活动的(Norris ,2004:作者还提出了模态强度与社会行为者的“注意”114) 。最后作者还运用了实例来说明高一级行动(attention )和“意识”(awareness )之间的关系,如前景化过程中所体现的语义和语用功能。
高模态强度相当于互动注意或意识(interac-tional 第七章,作者指出模态密度前景——背景连attention/awareness)的高一级行动。续体理论能将互动与意识有效地联系起来,认为
第五章,作者用实例说明了在交际中如何判交际主体能将同时发生或有序发生的一系列高一断参与者的“注意”和“意识”的不同程度。在级行动构建起来,这一框架为参与者在交际中运“高一级行动”中,根据交际主体对模态的注意用多种模态进行定性分析提供了有力的理论支撑和意识程度的不同,Norris 提出了前景化(fore-(Norris ,2004:128)。本章的重点是运用模态密ground )、中景化(mid-ground )和背景化(back-度前景——背景连续体理论框架分析复杂多模态ground )三个概念。使用模态密度高,最受行动者互动的整个过程,并描述多种共时进行的高一级注意的“高一级行动”是前景化行动;使用模态行动,其中包括各种交流模态的体现、模态密度密度低,最不受行动者注意的“高一级行动”是的分析、交际主体注意和意识程度的切分以及高背景化行动或中景化行动。前景化、中景化和背一级行动的前景化过程中所体现的语义和语用功景化区别了人们在交际中体现的注意/意识的程能。作者还结合具体实例验证了该理论框架的可度。Norris (2004:97)指出根据事件发生的不同行性。研究发现在复杂的多模态互动过程中,各阶段和个人意识表现的不同程度,人类互动被看种交流模态之间存在相互依赖(interdependence ) 作是一系列高一级行动的构建。前景化、中景化的关系,而不是相互独立的(independence );交际和背景化这三个阶段不是孤立存在的,因此作者主体高一级行动的转变会引起其他参与者高一级提出了模态密度前景—背景连续体分析框架,这行动的变化;交际主体参与高一级行动的同时也一框架为研究在交际中某一特定时刻同时发生的建构了社会世界(social world )(Norris ,2009:高一级行动提供了理论基础。基于该框架作者论137)。
证了六种同时发生的前景化高一级行动的实例。第八章,是该书的总结部分。在本章中,作最后,为了更清楚地描述建构高一级行动时行动者再次总结了该书出现的重要术语和概念,包括者运用的交流模态,Norris 提出了模态密度圈互动的概念、模态密度、前景背景连续体,并指(modal density circles)这一概念。在模态密度圈出了模态密度前景——背景连续体理论分析框架中,各交流模态都使用点状间断式的圆圈来表的可行性和局限性。同时从不同的分析领域对本示,点状间断式圆圈表明模态是没有界限的单书研究的方向提出了新的想法。从应用语言学的位。在具体交际事件中如果以一种模态为主,这角度,作者指出在互动中需要对语言所起的作用种模态越重要,其模态密度圈越大,反之越小。以及交际中使用的模态进行分析;从教育的角模态密度圈有利于人们更清楚地了解社会行为者度,在学习过程中对学生使用哪种模态更加有效在构建高一级行动时所运用的各种交流模态及其进行了研究;从社会学的角度,提出了高一级行重要性。动和交际主体两者之间的关系;从人类学的角
第六章,作者提出了交流语义学(communi-度,在不同的文化背景下,交际主体互动的差异cative semantics )和交流语用学(communicative 是什么?从儿童发展的角度,不同注意或意识程pragmatics )两个重要概念。交流语义学是指同时度对儿童习得的交际能力有什么影响?从心理学发生或按序建构的复杂互动意义的系统组织,目的角度,互动可以把人的意识、认知与心智结合的是指出在一系列高一级行动中人们表现出的注起来研究。最后,作者对如何构建人物身份和人
87
物关系提出了自己的构想。语分析研究,还为动态语篇的多模态话语分析的
研究提供了新的视角,也拓展了多模态互动分析
理论研究的范围。因此,该书对多模态话语分析
理论的完善和发展具有重要意义。3. 影响 该书出版十余年来,在学术界产生了深远影
响:(1)丰富和拓展了多模态话语分析理论研究
的对象,为动态语篇的多模态话语研究奠定了理
论基础。O ’Toole (1994)、Kress 和van Leeuwen
(1996, 2001) 主要是从图像社会符号学分析的角
度来研究静态的视觉平面图像,Norris (2004)多
模态互动分析的研究对象侧重于动态的多模态话
语即动态的视频录像。模态密度前景—背景连续
体理论分析框架为分析动态语篇的多模态互动研
究提供了坚实的理论基础,通过该理论框架可以
更有效地探究动态语篇中交际事件的不同阶段及
其模态选择和各模态使用的强度和密度的差异,
同时该框架也有助于分析在交际过程中交际主体
和参与者是如何将单独的片段信息(separate 4. 启示 Norris (2004)提出的多模态互动分析理论受到Scollon (1998, 2001)关于中介话语分析和联结分析的影响,Ron Scollon 认为人类行动(human action )包括三个方面的原则,即社会行动(social action )、交流(communication )和历史(history ),由此Norris 提出了行动(action )为多模态互动研究的基本单位,这为了解整个交际事件的发展过程奠定了坚实基础。Norris 认为,人类互动是人类以各种形式的模态作为“中介的行动”(mediated action ),在整个交际事件中都可以辨认出其体现的“行动”过程和阶段,通过对模态的注意或意
识程度的切分,人类互动的过程是能够辨认出阶
段来的,“高一级行动”描述了整个交际事件的
主要内容及其所处的阶段,“低一级行动”是构
成高一级行动的重要部分,在整个交际事件发展
的各个阶段正是由各种模态协同执行的一系列前
景化高一级行动构成的,同一交际事件的其他高
一级行动仍然存在于社会行动者的意识或注意
里,只是被“背景化”或“中景化”了。该书中
作者不仅介绍了交际事件中模态的构成,还通过
模态密度区分了交际主体参与的一系列高一级行
动与其体现的意识或注意程度,交际主体的意识
或注意对构建其他高一级行动具有结构作用,一
旦确定了高一级行动,就可以根据交际主体意识
或注意的变化,进一步研究一个高一级行动是如
何影响另一个高一级行动的。在整个交际事件
中,各个阶段之间的变化存在过渡,这一部分可
使用言语或其他模态来实现。
近20年来,在人际互动中,话语分析已经从
单纯的语言研究扩展到包括语言在内的多种模态
使用的研究,即多模态话语分析。Norris 多模态
互动研究与Kress 与van Leeuwen(2001)的研究不
同,认为互动是通过“言语”,“空间距离”、
“身体姿势”、“手部动作”、“头部动作”、
“眼神”、“音乐”、“印刷物”和“场景布局”
这九种主要交流模态的协同使用进行的,这九种
主要交流模态是多模态互动分析的核心,Norris
把这九种交流模态分为表征模态(embodied mode)
和非表征模态(disembodied mode)。表征模态是交际主体在交流过程中表现出的模态,如语言、姿
message )整合构建起来表达完整的信息的。基于多模态互动分析理论,张佐成等(2015)分析了商务会议、电视访谈、学术演讲、商务谈判等不同类型的多模态即席话语,研究发现多模态即席话语模态之间存在互补、反向互补、非互补三种互动机制,比如商务会议和商务谈判中音韵特征和手部动作对语言模态表达意义所起的强调作用以及在学术演讲中语言模态表达的负面信息。(2) 借助该理论框架,我们还可以清楚地了解到交际主体是如何构建一系列高一级行动的,这一系列高一级行动是怎样列入前景——背景连续体与其他行动产生联系的。张德禄和王正(2016)在Norris 多模态互动理论的基础上,提出了多层次多模态互动分析的综合理论框架,并将该理论框架运用到一堂大学英语课的多模态互动分析中,研究发现教学活动是师生注意的焦点,属于高一级行动,教师的口语模态是占据统治地位的模态,注视、手势和身体姿势与口语模态为协同关系,教师宣布活动指示和教师的检查活动效果阶段属于高模态密度活动。(3)多模态互动课堂教学模式研究成为了课堂教学研究的热点。刘秀丽等(2013)结合Norris 多模态互动理论,探讨了外语教师多模态话语与学生学习积极性的关系,研究发现在师生交流时,教师在教学中会运用多种手段(means )将学生的注意力从一个高一级行动转为另一个高一级行动,研究结果证明多模态互动分析理论有利于帮助发现课堂教学中出现的问题,对增强教学效果有重要的指导作用。总之,该书不仅在理论和应用上丰富和发展了多模态话
88
势、眼神等。非表征模态是交际主体在交流过程义,同时还忽视了在互动中交流主体所体现的社中没有表现出的模态或互动交际中的物质世界,会身份。Norris 的分析方法主要关注的是“内容如场景布局、背景音乐等。这两种模态类型的分层”(content layer),即摄像机采集到的人际互动类体现了在人际互动中交际主体和参与者运用的的视频图像,没有提出一套详尽的对多模态话语各种模态类型以及这些模态在构建人际互动中所进行切分处理的方法。
起的不同作用。 此外,话语分析往往把语境作为言语发生的 Norris 在书中指出人类的所有互动都具有多背景,借用语境因素来解释各种言语的特点。在模态特征,人类互动作为一种社会行为包括语言多模态话语研究中,模态只有通过根据所处的语使用和其他模态的使用,同时需要借助各种模态境以及所代表的对象(实体、过程、概念等)才能作为中介来进行,人类互动还是一个连续的动态实现意义(张佐成,2015:200)。在该书中,过程,每一种模态都是一套符号系统,表达其特Norris 虽然谈到了语境是语言以外的一切事物定意义和潜在意义。在人际互动过程中,根据模(Norris ,2009:149),即语言之外的模态被当作语态使用的程度,Norris 还提出了“模态密度”,境,语境和语言模态共同作用作为表达意义的资“模态强度”和“模态复杂性”等重要概念,这源,背景化的高一级行动实际上是前景化行动的些概念的提出对多模态话语研究者了解人际互动语境,有时候前景化的行动会转变为中景化和背中模态的重要性以及模态之间的关系有重要意景化的行动,成为新的前景化行动的语境,但是义。Norris 认为在人类互动中言语模态并不是总却没有把语境单独列为一个分析层次来进行研起主导作用,人际互动体现了辨认的类型,每个究,没有突出语境在整个人际互动中所起的重要类型都有可辨认的过程,过程的实现可以通过模作用。从研究方法上来看,该书主要是以定性研态的使用来观察。同时每个模态都有其起点、持究的方法分析多模态互动,Norris 认为模态具有续阶段和结束阶段的发展过程,这对研究互动过不可数性,这是值得推敲的问题。随着科技的发程中模态发展的整个过程有重要的指导意义。从展,ELAN 等多模态分析软件工具的开发和使用理论上来看Norris (2004)多模态互动理论拓展了可以用来分析交际主体所表现出来的各种交流模人类互动的内涵,丰富和发展了多模态话语分析态,还可以对视频文件进行多层级同步标注,在理论。以后的研究中我们可以运用定性和定量分析相结
合的研究方法,对多模态互动中的各交流模态的
5. 不足之处关系进行更加详细和精确的研究分析。
首先,该书提出了模态间自下而上即从低一
级行动到人际互动事件的分析层次,从模态密度6. 结语
和模态复杂性的角度对模态的重要性和模态使用 《多模态互动分析》一书语言通俗易懂、结构的主次方面进行了分析,但是没有对各交流模态清晰、内容充实、论证合理。该书是一本研究人在使用过程中产生的意义进行分类。其次该书只际互动中多模态话语分析的实用指南,同时对语涉及到交际主体与参与者在交际事件中各模态之言学,社会学、教育学、人类学和心理学等其他间的互动关系,没有考虑到视频图像中交际主体学科在这方面的研究具有重要的指导作用。乔治与观看者之间的互动关系。该书选取的研究对象城大学Ron Scollon教授在序言中评价该书将成为即视频录像涉及的范围比较窄,主要是围绕生活研究人类多模态互动的一本重要的参考书。该书中朋友之间、师生之间以及医生和患者之间的多中提出的模态密度前景——背景连续体多模态互模态话语,没有对不同文体风格的动态语篇进行动分析框架为多模态话语分析提供了新的视角,多模态互动分析,如现场商务谈判和现场演讲视对研究多模态话语分析提供了新的启示,特别是频等,如果能增加不同风格的多模态语篇的分对动态语篇的多模态互动研究提供了坚实的理论析,论证的主体部分将更具说服力。基础。在国内,以Gunther Kress和Van Leeuwen 其次,该书指出了在交际事件中各交流模态为代表的系统功能多模态话语分析取得了很多成之间相互依赖的关系,但是没有明确指出其他的果,但是以Norris 为代表的多模态互动分析理论互动关系如强化、弱化等。该书只关注交际主体的应用尚未得到应有的重视,笔者希望在以后的在互动中产生的情感、观点和想法,没有重视各研究中能更多地运用该理论来研究多模态话语和交流模态的运用对构建交际事件所起的社会意多模态语篇,以拓展了多模态互动分析理论的研
89
究范围,并通过不断的实践来验证该理论可行性和可发展性,推动多模态话语研究的发展。参考文献:
[1] Jewitt, C. 2009. The Routledge Handbook of MultimodalAnalysis [M]. London and New York: Routledge.
[2] Kress, G & T. Van Leeuwen. 1996. Reading Images: TheGrammar of Visual Design[M] . London: Routledge.
[3] Kress,G & T.Van Leeuwen. 2001. Multimodal Discourse: TheModes and Media of Contemporary Communication [M].London: Arnold.
[4]Norris, S. 2004. Analyzing Multimodal Interaction: A Methodological Framework[M]. New York: Routledge.
[5]Norris, S. 2007. The micropolitics of personal and ethnicityidentity [J]. Discourse and Society, (5): 653-674.
[6]Norris,S. 2009. Modal density and modal configurations:Multimodal action[A]. In C. Jewitt (ed.). The Routledge Handbook of MultimodalAnalysis [C]. London: Routledge.
[7] O’Toole, M. 1994. The language of Displayed Art [M]. London:Leicester University Press.
[8] Scollon, R. 1998. Mediated Discourse as Social Interaction[M].London: Longman.
[9] Scollon, R. 2001. Mediated Discourse: The Nexus of Practice
[M]. London: Routledge.
(上接第80页)
参考文献:
[1] Barrett, L. 2001.“How the Dead Speak to the Living”:Intertextuality and the Postmodern Sublime in White Noise
[J]. Journal of Modern Literature, (25/2): 97-113.
[2] DeCurtis, A. 2005. “An Outsider in This Society”: Aninterview with Don DeLillo [A]. In Thomas DePietro (ed.).Conversations with Don DeLillo [C]. Jackson: UP of Mississippi.
[3] Harack, K. 2013. Embedded and embodied memories: Body,space, and time in Don DeLillo’s White Noise and FallingMan [J]. Contemporary Literature, (2): 303-336.
[4] Heise, U. 2008. Sense of Place and Sense of Planet: The Environmental Imagination of the Global[M]. New York:Oxford niversity Press.
[5] 鲍德里亚,2008.刘成富,全志钢译.消费社会[M].南京:南京大学出版社.
[6] 陈振明.1992.法兰克福学派与科学技术哲学[M].北京:中国人民大学出版社.
[7] 程静 贾德江.2010.《白噪音》:现代技术元叙事和技术责任主体的缺失[J].解放军外国语学院学报,(6):96-100.
[8] 德里罗.2013.朱叶译.白噪音[M].南京:译林出版社.
[9] 弗洛姆.2002.刘海林译.逃避自由[M].北京:国际文化出版社.[10] 刘秀丽 张德禄 张宜波.2013.外语教师多模态话语与学生学习积极性的关系研究[J].外语电化教学,(5):3-9.[11] 张佐成等.2015.多模态即席话语研究[M].世界图书出版公司.[12] 张德禄 王正.2016.多模态互动分析框架探索[J].中国外语,(2):54-61.A New Development of Multimodal Discourse Analysis—A Review on Multimodal Interaction AnalysisAbstract :With the development of multimodal discourse analysis,the famous linguist Norris wrote Multimodal Interaction Analysisbased on interactional sociolinguistics, mediated discourse andnexus analysis and multimodality. This book applies a qualitativeanalysis as the main research method and the dynamic video asthe research object. By the detailed analysis of the nine communicative modes, namely spoken language, proxemics,posture, gesture, head movement, gaze, music, print and layout,it builds the basic framework of multimodal interaction analysis.This book not only enriches and develops the multimodal discourseanalysis theory both theoretically and practically, but also providesa new perspective for the study of dynamic multimodal discourseanalysis and expands the scope of the study of multimodal interaction analysis theory.Key Words: multimodal discourse analysis; multimodal; interaction[10] 霍克海默 阿多尔诺.2006.梁敬东.启蒙辩证——哲学片段[M].上海:上海人民出版社.[11] 马尔库塞.2008.刘继译.单向度的人:发达工业社会意识形态研究[M].上海:上海译文出版社.[12] 朱新福.2005.《白噪音》中的生态意识[J].外国文学研究,(5):109-114.Disappearing Man: The Ethical Thoughts of Science and Technology in White NoiseAbstract : Based on the critical theories of the Frankfurt Schoolabout science and technology, this thesis focuses on the study ofDon DeLillo’s ethical thoughts of science and technology in hisrepresentative novel White Noise. Through analyzing DeLillo’s depictions of sci-tech worship, dominance and apocalypse, thisthesis expounds his critical thoughts on technological rationality,alienation and risks. In White Noise, DeLillo shows the co-existingrelationship between technology and humanity, reveals that moderntechnology, as an“invisible hand”, exerts great influence onmankind, and crystallizes the disaster hidden behind the myth ofscience and technology.Key Words: White Noise; DeLillo; science and technology; ethics;postindustrial society
90