多模态话语分析理论在新媒介时代的应用
论多模态话语的整体意义构建——基于一个多模态媒体语篇的话语分析 韦琴红
万方数据论多模态话语的整体意义构建ｃｏｍｍｕｎｉｃａｔｉｏｎ），多模态交流（ｍｕｌｔｉｍｏｄ—ａＪｃｏｍ－ｍｕｎｉｃａｔｉｏｎ）已经成为主流。
按照社会符号学家（Ｈｏｄｇｅ＆Ｋｒｅｓｓ，１９８８：ｖｉｉ）的观点，意义如此强大和广泛地存在于视觉、听觉、行为、表情和动作等其他社会符号的资源系统中，只注重语言文字是远远不够的，因为没有一个单一的符号能够被孤立地完全理解。
从严格意义上说，现实中“所有的交流都是多模态的”（Ｂａｌｄｒｙ＆Ｔｈｉｂａｕｈ，２００６；Ｋｒｅｓｓ＆ｖａｎＬｅｅｕｗｅｎ，１９９６／２００６，１９９８；Ｌｅｍｋｅ，２００２；Ｎｏｒｒｉｓ，２００４）ｏ我国也开始重视对多模态话语的研究。
胡壮麟（２００６，２００７ａ，２００７ｂ）从理论和实践的角度研究了多模态化和意义的多模态构建，朱永生（２００７）研究了多模态话语的理论基础和研究方法，李战子（２００３）、叶起昌（２００６）以及成文和田海龙（２００６）等也对多模态话语进行了研究，但是对由图像、文字和颜色组成的具体多模态新闻语篇的研究还不多见。
笔者２００６年受国家留学基金资助，有幸在英国卡迪夫大学聆听了多模态话语的创始人之一ＴｈｅｏｖａｎＬｅｅｕｗｅｎ教授讲授的多模态话语这门课。
本文尝试运用这种新的话语分析方法研究２００６年刊登在英国《泰晤士报》（ＴｈｅＴ／ｍｅｓ）上的一个多模态语篇，旨在探索现代媒体交流中多模态话语的意义构建，达到多模态地认识和诠释意义的目的。
２多模态话语的意义构建多模态话语分析包括新思维方式和分析方法，认为所有语篇总是多模态的，单模态只是传统固定思维的结果，分析方法是一套多目的的工具。
Ｂａｌｄｒｙ和Ｔｈｉｂａｕｈ（２００６）提出了一系列研究多模态话语的工具和概念，主要用于研究一个有技术支撑的平面，如一个印刷页、一个电视屏幕或一个网页中一个物质符号与其他物质符号的结合如何在现代社会文化背景中形成一种符号资源共同实现功能和表达意义。
多模态隐喻视域下媒介话语的认知分析——以美妆营销类自媒体为例
詞阁知1’f.2021/1新闻与传播研究_多模态隐喻视域下媒介话语的认知分析—以美妆营销类自媒体为例□宫梦如谢竞贤【摘要】互联网和网络社区的发展催生了自媒体传播。
以信息交互为特征的自媒体话 语中运用了大量的多模态隐喻，而多模态隐喻意义建构进一步扩大了对自媒体话语的影 响。
基于定性和定量相结合的方法，文章从多模态隐喻的角度分析美妆营销类自媒体 话语，得到的隐喻包括人类隐喻、食物隐喻、颜色隐喻、建筑隐喻和地质隐喻。
文章 发现自媒体话语通过隐喻来映射商品和消费者的特征，表达主观意识并影响消费者的认 知和行为。
【关键词】多模态隐喻；媒介话语；自媒体传播；语料库引语互联网和社交网络平台的发展推动了自媒 体的诞生。
自媒体的概念最早由丹*吉尔默提 出，是指公众参与式数字信息传播，即全民创作 与信息共享的社会现象[11。
自媒体以用户生成内 容（UGC)、互动性和即时性为特征，在商品营 销、粉丝引导、品牌塑造方面具有明显优势[21。
自媒体营销以数字网络为载体、以网络社区为平 台，具有融合性、个性化和互动性特点[3M。
阿 加沃尔等认为消费的社会属性意味着消费者的态 度和购买行为受到与品牌互动模式的影响。
布莱 克斯顿则认为媒介是人的感觉延伸和感官的扩 展，信息内容是视听层面的交流。
[51徐升华、汤敏倩指出，就情绪感官来说，“新媒体模式下的 情绪感官包括引导型和参与型” |6]。
而自媒体传 播的本质是信息交互，其营销兼具情绪感官的引 导和参与属性。
本文从多模态隐喻的视角，分析 网络社区中美妆营销类自媒体的传播，探究其话 语特点及认知机制。
一、自媒体的定义及相关研究(一）自媒体传播作为网络传播的媒介，自媒体与新媒体的概 念辨析没有统一的标准。
新媒体就是网络媒体，是网络衍生的一种新型传播媒介[71。
网络媒体大 致经历了门户网站、博客和自媒体三个不同的发 展阶段181。
可以肯定的是，新媒体和自媒体都是【作者简介】宫梦如，江南大学，外国语学院，硕士研究生s谢竞贤，江南大学，外国语学院，副教授。
国内多模态话语分析综论以CSSCI来源期刊发表成果为考察对象
国内多模态话语分析综论以CSSCI来源期刊发表成果为考察对象一、本文概述随着信息技术的飞速发展和多媒体时代的来临，多模态话语作为一种新型的语言交际方式，逐渐在人们的日常交流中占据重要地位。
本文旨在对国内多模态话语分析的研究现状进行全面的综论，以CSSCI来源期刊上发表的相关成果为考察对象，系统梳理和分析多模态话语分析的理论基础、研究方法、应用领域以及发展趋势。
通过深入剖析多模态话语的内在机制和功能特点，本文期望能够为多模态话语分析的理论研究和实际应用提供有益的参考和启示，同时也为国内语言学及相关领域的研究者提供一个新的视角和思路。
在研究方法上，本文将采用文献计量和内容分析的方法，对CSSCI来源期刊上发表的多模态话语分析相关论文进行系统的统计和梳理，从论文数量、研究主题、研究方法、引用情况等多个维度进行深入分析，以揭示国内多模态话语分析研究的整体状况和发展趋势。
本文还将结合具体的案例分析，探讨多模态话语分析在不同领域中的实际应用效果和价值。
本文的研究不仅有助于深化对多模态话语分析的理解，也有助于推动语言学及相关领域的研究进展。
通过本文的综论，我们希望能够为国内多模态话语分析的研究者提供一个全面、系统的研究视角，推动多模态话语分析在国内的深入发展和广泛应用。
二、多模态话语分析的基本理论框架多模态话语分析作为一种跨学科的研究方法，其基本理论框架涉及语言学、符号学、传播学、社会学等多个领域。
在多模态话语中，语言不再是唯一的交际手段，而是与其他模态如图像、声音、动作等共同构成完整的信息传递系统。
因此，多模态话语分析的基本理论框架需要涵盖这些不同的模态，并解释它们如何协同工作以传递意义。
在多模态话语分析的理论框架中，模态之间的互补性和互动性是关键概念。
互补性指的是不同模态在话语中的相互补充，它们共同为信息的传递提供完整的意义。
例如，在一段视频演讲中，语言模态提供了主要的信息内容，而图像和声音模态则通过表情、手势和背景音乐等方式为语言模态提供补充和强调。
多模态话语理论与媒体技术在外语教学中的应用_张德禄
2009年7月第30卷第4期 外语教学F oreign L anguage Educa tionJuly.2009Vol.30No.4多模态话语理论与媒体技术在外语教学中的应用张德禄(中国海洋大学外国语学院山东青岛266071)摘 要:本文重点探讨用系统功能语言学理论为多模态话语分析和研究提供理论框架,并根据这个框架为现代媒体技术条件下的外语教学实践提供选择有效教学过程和实践的指导。
在现代技术条件下,在多模态话语交际框架下,对模态的选择可以从三个角度进行:1)为外语教学提供教学情景和便利条件;2)为外语教学提供辅助条件;3)为多模态话语交际提供多通道话语意义表达方式,提高教学效率。
对于一定的话语以什么模态和媒体表达最为有效,是需要进一步认真研究的课题。
关键词:多模态话语;多媒体;现代媒体技术;选择中图分类号:H030 文献标识码:A 文章编号:100025544(2009)0420015206Abstract:I n the p resent article,we mainly try t o devel op a theoretical fra me work f or multi m odal discourse analysis and re2 search with the theory of syste m ic functi onal linguistics,and p r ovide guidance for the choice of effective p r ocedures and p rac2 tice in f oreign language teaching under the conditi on of modern media technol ogy.I n this case,the choice of modes and media in a multi m odal discourse communicati on in a f oreign language teaching setting can be made fr om the f oll owing three pers pec2 tives:1)it should be able t o p r ovide ne w teaching envir on ments and facile conditi ons;2)it should be able t o p r ovide supp le2 mentary or enabling conditi ons;3)it should be able t o p r ovide multi2channels f or meaning2making in a multi m odal discourse communicati on,and enhance teaching efficiency.A s f or what type of discourse can be best p resented with what type of modes or media,it re mains a t op ic f or further research.Key words:multi m odal discourse;multi2media;modern media technol ogy;choice1.引言在话语交际中,话语的一大部分意义是由非语言因素体现的,如伴语言特征,如音响度、声调、语调、音速等,身体特征,如手势、身势、面部表情、动作、移动等,和非身体特征,如PPT、音响设备、网络、实验室、周围的环境因素等。
英语教学中多模态话语分析发展与应用
英语教学中多模态话语分析发展与应用多模态话语分析是指针对语言交际中的非语言元素，如手势、面部表情、身体动作、音调、音量和语速等，与语言部分相互结合，共同构成的交际意义进行分析的一种方法。
对于英语教学来说，多模态话语分析可以用来帮助学生更好地理解英语的交际意义，同时也能够促进教学中与学生之间的互动与交流，提高教学效果。
多模态话语分析的发展始于20世纪70年代，当时语言学家Gunter Kress和Theo van Leeuwen提出了多模态话语分析的概念，并在1980年出版了《画面和语言》一书，引起了广泛的关注。
随着计算机技术和通讯技术的快速发展，人们对多模态话语分析的研究逐渐深入。
现在，多模态话语分析已经成为应用语言学和社会学领域的重要研究方法之一。
在英语教学中，多模态话语分析可以应用于多个方面。
例如，在教学中，教师可以通过分析他们的身体语言、面部表情和声音来确保他们的教学效果更加高效。
要想让学生更好地理解英语，教师可以使用多种方式来呈现课程内容，包括图片、图表、视频和音频等。
通过分析这些非语言元素，学生可以更好地理解英语的交际意义，从而更好地掌握语言技能。
此外，多模态话语分析还可以在英语学习的评估中得到应用。
学生的交际能力不仅仅取决于语言的掌握程度，还包括他们的身体语言、面部表情等非语言因素。
因此，在英语学习的评估中也应该考虑这些因素。
例如，学生在口语考试中展示出积极的面部表情和自然的手势可以帮助他们获得更高的分数。
总之，多模态话语分析的应用可以帮助教师和学生更好地理解英语的交际意义，促进教学和学习的有效进行。
在未来，多模态话语分析必将在英语教学中得到更广泛的应用。
多模态话语理论与媒体技术在外语教学中的应用
多模态话语理论与媒体技术在外语教学中的应用一、本文概述随着科技的飞速发展和全球化的推进，外语教学的理念和方法也在不断地更新和变革。
多模态话语理论和媒体技术的融合为外语教学带来了新的视角和可能性。
本文旨在探讨多模态话语理论与媒体技术在外语教学中的应用，分析它们如何共同促进外语教学的效果提升，以及在实际教学中所面临的挑战和应对策略。
本文将简要介绍多模态话语理论的基本概念和发展历程，阐述其在语言交际中的重要作用。
接着，将探讨媒体技术的发展如何为外语教学提供了更多的教学资源和手段，特别是多媒体和网络技术的应用，使得外语教学更加生动、有趣和高效。
本文将重点分析多模态话语理论与媒体技术在外语教学中的应用，包括如何通过多媒体教学资源创建多模态教学环境，如何利用网络技术构建互动学习平台，以及如何在教学中有效整合文本、图像、音频和视频等多种模态，提高学生的学习兴趣和效果。
本文将讨论在实际教学中如何克服一些挑战，如教师技能的提升、教学资源的整合、教学评价的改进等，以充分发挥多模态话语理论和媒体技术在外语教学中的优势。
通过本文的论述，我们期望能够为外语教学的改革和创新提供一些有益的启示和建议。
二、多模态话语理论在外语教学中的应用随着科技的飞速发展和全球化的深入推进，外语教学的理念和方法也在不断地革新。
其中，多模态话语理论的应用为外语教学带来了革命性的变革。
多模态话语理论强调了在交流过程中，除了语言本身，还包括图像、声音、动作等多种模态的协同作用。
在外语教学中，这一理论的应用不仅丰富了教学手段，也提高了学生的学习效果。
在外语课堂上，教师利用多模态话语理论，可以设计更加生动、形象的教学活动。
例如，通过结合视频、音频、图像等多种媒体资源，教师可以创建出更加真实的语境，帮助学生更好地理解和运用所学知识。
这样的教学方式不仅激发了学生的学习兴趣，也提高了他们的语言实际应用能力。
同时，多模态话语理论还鼓励学生积极参与到课堂互动中。
多模态话语分析综合框架
意义的符号等。
14
图一：多模态话语媒体系统
语言
伴语言
多
纯语言
模
态
话
语
肢体
媒
体
系
统
非语言
非肢体
音响 音调 字体 布局 声音 文字 动作（移动） 比拟 面容
肢体
工具
环境
表情 眼神 五官 手势 姿势 摇动 PPT 音响扩放 网络 实验室 同声翻译室
在这个框架中，语言和图画作为交际模态共有意识形态、体裁、语域 和话语意义四个层面。
在内容层面，图画具有视觉语法，而语言则有词汇语法； 在表达层面，语言由印刷符号体现；图形由图形符号体现。 在这里最主要的研究领域是把两者在内容层面和表达层面整合为一体，
特别是在内容层面研究的任务最重。
5
话语意义层面，概念意义、人际意义和谋篇意义。 形式层面：视觉语法、听觉语法、触觉语法等。
9
4.0 多模态话语的形式及其关系
4.1 多模态话语的形式 媒体只有通过形式层面的组织和模式化才具有直接表达意义的能力。 形式对媒介进行组织有两种手段：一是直接赋予某个媒介符号某种意义。
由这种符号组成的符号系统通常没有能产性、没有任意性； 二是把一定的媒介符号进行组合，然后赋予这种组合一定的意义，这就是
口头讲授、回答问题等方式。
18
在这个教学模式中，要涉及模态内部媒体之间的协作，如 书本与PPT：PPT通过色彩、光亮、突出的字体等来强调重 点信息，而书本则可提供具体信息，补充PPT提供的框架中 的具体信息。
更重要的是视觉模态与听觉模态的协作。从形式上讲，每 一种模态都可以是自足的，但只有多种模态协作才能收到 更好的效果。
多模态话语分析理论模型及其对新媒体跨文化传播研究的方法论意义
多模态话语分析理论模型及其对新媒体跨文化传播研究的方法论意义一、本文概述随着新媒体技术的飞速发展和全球化的推进，跨文化传播日益成为学术界和社会关注的焦点。
多模态话语分析理论模型作为跨文化传播研究的新视角，具有重要的方法论意义。
本文旨在探讨多模态话语分析理论模型的基本概念、主要特点及其在新媒体跨文化传播研究中的应用价值。
通过对多模态话语分析理论模型的深入研究，本文旨在为新媒体跨文化传播研究提供新的理论框架和方法论指导，促进不同文化背景下的有效交流与理解。
本文将对多模态话语分析理论模型进行概述，介绍其发展历程、基本理论和核心概念。
在此基础上，文章将分析多模态话语分析在新媒体跨文化传播研究中的适用性，探讨其如何弥补传统传播研究的不足，以及在新媒体环境下如何更好地揭示跨文化传播的内在机制和规律。
本文将重点探讨多模态话语分析理论模型在新媒体跨文化传播研究中的具体应用。
通过案例分析、实证研究等方法，文章将展示多模态话语分析在解析新媒体文本、揭示文化符号意义、分析受众认知过程等方面的独特优势。
文章还将关注多模态话语分析在跨文化传播效果评估、传播策略优化等方面的实际应用。
本文将总结多模态话语分析理论模型对新媒体跨文化传播研究的方法论意义。
通过对多模态话语分析理论模型在新媒体跨文化传播研究中的应用进行评估和反思，文章将提出未来研究的方向和展望，以期推动新媒体跨文化传播研究的深入发展。
二、多模态话语分析理论模型概述多模态话语分析（Multimodal Discourse Analysis, MDA）是一种跨学科的研究方法，旨在分析语言以外的其他符号系统如何与语言共同构建意义。
它突破了传统语言学以文本和语音为主的单一模态分析框架，将视觉、听觉、触觉等多种模态纳入研究视野，从而更全面、深入地揭示话语的意义生成和传播过程。
多模态话语分析理论模型的核心在于强调话语的多元性和动态性。
它认为，话语不仅仅是由语言符号构成的，还包括图像、声音、动作等非语言符号。
张德禄-多模态话语分析理论与外语教学
第三, “重新设计”：由设计过程产生的资源或重新产生 的意义，又可成为一种新的可利用的设计，具有制造意义 潜力的新的资源。 这样，设计的观点不仅应用于原创性活动，更应当看作是 日常经历的核心部分，因而这是教育过程中应当强调的重 要成分。(Williamson 2005)。
19
Kress (2004)重视设计者的作用。所有符号资源都具有社会意 义，属于特定文化。多模态符号(词语、文字、信件、色彩、 字体)的复杂信息反映了设计者的尽量选用多种符号表达意义 的意愿。 设计者根据符号特殊的修辞目的，用尽各种手段来劝诱那些有 机遇接触该信息的人们。页面/网址的设计者不再是权威性语 篇的“作者”，但他是材料的提供者，按照想象中读者的所谓 特点进行安排。
12
非肢体媒体
主要包括工具和环境两个方面。 随着现代科学技术的发展，交际者肢体以外的交际媒体变 得十分发达。从起初的音响设备到现在的网络平台、同声 传译室等都是工具性媒体。 除此之外，交际者还可以利用环境中已有的所有符号系统 来进行交际，包括现场环境中的人和物、有象征意义的符 号等(见图1。)
二维的是平面的：平面图画； 三维的是立体的：立体图形；
四维的是动态的，是可移动的三维符号系统，如电影、动 画等。
18
4. 设计
设计是制造语篇和识读语篇的过程。 书面语占统治地位的设计：写作的逻辑曾经塑造了页面的顺 序和书本。 新媒体时代的设计：当今占统治地位的媒体是屏幕，不管是 游戏机、移动电话、个人电脑或者电视和录像。因此现在屏 幕的逻辑正在塑造新的顺序和对屏幕的安排。虽然文字写作 可以出现在屏幕上，但它从属于图像，如同过去图像可出现 于书本上，但从属于文字写作。因此图像将越来越塑造写作 的出现和用途，这一过程已在公众信息传递的事例中出现。 过去，作者的形象和写作的方式占统治地位；在新的屏幕设 计中，设计者和图像的模式占统治地位。(Kress 2004)。
多模态社交媒体分析
多模态社交媒体分析随着互联网的快速发展，社交媒体已经成为人们日常生活中不可或缺的一部分。
人们通过社交媒体平台分享自己的生活、观点和情感，与朋友、家人和陌生人进行互动。
然而，传统的社交媒体主要依赖于文本形式的信息传递，无法满足用户对多模态内容的需求。
多模态社交媒体分析应运而生，通过对文本、图像、音频和视频等多种形式内容进行综合分析，为用户提供更丰富、更细致的信息。
一方面，多模态社交媒体分析可以提供更全面的用户画像。
传统上，通过用户发布的文本内容可以了解其兴趣爱好、观点倾向等信息。
然而，在现实生活中，人们通过图片和视频等形式表达自己更为直观和真实。
因此，在多模态社交媒体分析中加入图像和视频等元素可以更好地了解用户行为与特征。
另一方面，在情感识别方面也有着广泛应用前景。
情感识别是指通过对文本、音频或视频等数据进行分析来判断其表达者情感状态的过程。
多模态社交媒体分析可以通过结合多种模态的数据，提高情感识别的准确性和可靠性。
例如，通过分析用户发布的图片和视频中的面部表情、语调、语言内容等，可以更准确地判断用户当前的情感状态。
多模态社交媒体分析还可以应用于社交网络中的舆情分析。
舆情分析是指对社交网络中涉及特定事件、话题或个人等内容进行监测和分析，以了解公众对该事件或话题的态度和观点。
传统上，舆情分析主要依赖于文本内容的挖掘和统计。
然而，在现实生活中，人们通过图片、视频等形式表达对特定事件或话题的看法更为直观。
因此，在多模态社交媒体分析中加入图像和视频等元素可以更全面地了解公众对特定事件或话题的态度。
除了上述应用领域外，多模态社交媒体分析还可以应用于广告推荐、用户行为预测等方面。
例如，在广告推荐方面，传统上主要依靠用户历史行为数据进行推荐。
然而，在现实生活中，人们通过图片、视频等形式表达自己对产品或服务的喜好更直观。
因此，通过对用户发布的多模态内容进行分析，可以更准确地了解用户的兴趣和需求，从而提供更精准的广告推荐。
新媒体时代英语多模态教学理论框架与实践策略
多模态是指结合两种或两种以上模态，如语言、音频、图像、动画、肢体等，实现学生听觉、视觉、触觉、嗅觉等多感官与外部环境之间的互动[1]。
英语多模态教学的开发与应用，符合语言学习的规律，同时也有助于改善英语学习效率不高和实用不强的现实问题。
一、新媒体时代英语多模态教学的重要价值西方多模态话语分析理论为当前多模态教学提供了理论依据。
新媒体时代背景下，很多学者在诸多教学领域将多模态话语分析理论进行了实践应用，并取得了不错的效果。
多模态教学可以实现图片、文字、语言、视频等模态形式有机结合，能够更好地调动学生的感知能力，提升学生的社会交际能力。
与传统的单模态教学相比，多模态教学能够更加强化学生的多元功能，有助于提升英语教学效果。
首先，多模态教学有助于改变教师教学理念。
新媒体时代背景，为英语教学提供了更为多元化的技术场域，在多模态教学理念的影响下，使整个英语教学活动从单维度的单方向文字传输逐渐向多模态互动教学模式转变。
在多模态教学环境中学生的感官被充分调动。
在整个教学过程中除了传统的文字符号以外，还包含了眼神、面部表情、视频、动画、肢体语言等多种符号，使整个教学活动变得更为丰富。
在多模态教学环境中能够更好地帮助教师改变传统单一的教学理念形成多模态教学模式，在教学过程中教师可以运用更为丰富的教学手段和教学技术将教学内容传递给学生。
可以说，在多模态教学中，随着教师教学理念的改变，整个教学内容形式都会发生深刻变化，向着更有利于学生多样化发展的方向转变。
其次，多模态教学有助于形成更真实的语言环境。
新媒体时代背景下，在英语教学过程中可以利用更为先进的技术手段，诸如多媒体技术、虚拟现实技术等，这些技术可以创造一个相对真实的语言环境，学生在多媒体教学环境下能够接受不同的感官刺激，增强学生英语学习的积极性和主动性。
传统教学模式，学生处于被动地位，难以与教师进行沟通和互动，整个语言教学环境非常匮乏，学生很容易失去英语学习动机和学习兴趣[2]。
小度写范文2008北京奥运会开幕式的多模态话语分析模板
２００８北京奥运会开幕式的多模态话语分析一、前言兴起于20世纪90年代的多模态话语分析理论以系统功能语言学理论为基础，应用到图像、音乐、语言、手势等其它符号资源上，因为它们也参与语篇意义的生成，同样具有系统性、功能性（即同时具有概念功能、人际功能和语篇功能）及层次性，并提供了一套同时分析图像、音乐和文字相互兼容的术语，具有跨学科、应用性强特点，能在新媒介时代对电影戏剧、广告、网站页面设计、大型演出及舞台表演、排版、音乐、教科书设计、教学等多领域发挥指导作用，与传媒学、批评话语分析等有紧密联系。
本文尝试运用多模态话语分析理论，2008北京奥运会开幕式为范例，初步探讨其对于大型广场表演的应用性。
O’Halloran(2004)提出一个分析电影视觉图象与声响的分析模式：先从电影的类型、形式及风格区分，再从级阶角度：电影情节、程序、场景、场面调度、画面、人物、元素去分析电影。
模态选择因素从图2可看出有个元语言，分为三部分：语音（主要是听觉），图形（主要是视觉上），图示（主要有空间上），它们最终由语境决定。
模态选择因素是出于文化语境、情景语境、意义选择、模态形式、媒体实体。
Kress(2001)，所有的模态 (视觉的、姿态的、动作的、声音的) ,像语言一样,在社会使用过程中形成社会资源的模态，具有意义潜势。
当符号制造者在这些意义网络中进行选择。
设计者根据多模态符号的信息, 选择它们意义潜力来吸引访问者的兴趣。
对访问者来说,“信息是选择的过程,经他们转换成为知识”。
Kress(2004)认为设计，是在一定语境下进行的，由设计者的利益动机驱使的，符号经过生产、(分配)、理解一系列转换。
如果表达信息时有多种方法,就要传递的内容或意义来说,哪一种模态最好，哪一种模态在塑造信息时最能符合设计者、使用者需要，要考虑每一个模态如何被用来与其他模态一起产生意义。
Jewitt(2006)，模态的选择与模态本身的功能专业性、模态负荷、模态可供性紧密相关，用哪种模式是出于历史和意识形态的原因，也是出于模态本身特性而加以选择的。
新媒介时代英语专业视听课多模态教学的实施
新媒介时代英语专业视听课多模态教学的实施[摘要]文章探讨了新媒介时代信息交流的特征，并结合教学实践，从教学理念的转变、教学素材的组织、多模态课堂设计三方面探讨英语专业视听课程的多模态教学实施。
[关键词]新媒介时代英语专业视听课多模态教学多模态识读能力21世纪以来，由于信息网络技术的发展和多领域知识、技术、文化间的相互渗透，人类的交际行为模式和信息传播方式经历着颠覆性的变化，人类信息流通迈入了“新媒介时代”。
多模态教学原理以20世纪末兴起的多模态话语分析为基础，在研究中关注教学中非语言交际成分，通过对课堂中教师行为的定性和定量的判断和分析，对教学中的言语与手势、面部表情与语音识别、面部表情与语音综合等进行研究。
张德禄指出：话语意义中的一大部分由非语言因素体现。
非语言因素也称伴语言特征，它们包括音响度、声调、语调、音速等；手势、身势、面部表情、动作、移动等身体特征；ppt、音响设备、网络、实验室、周围的环境因素等非身体特征。
1996年新伦敦团体的一批学者提出，随着意义表达的多模态化，传统的以语言为中心的读写认知能力将不能适应社会发展，并提出了适应未来社会的“多模态识读能力”概念。
基于此，英语专业视听课应满足培养学习者多模态识读能力的需求，必须不断改革教学模式，展开注重多模态语料输入和多模态识读能力培养的教学模式，满足新媒介时代的语言学习要求。
多模态教学法认为语言、图像、声音、动作等都是构建意义的源泉，教学中应该协调运用多种模态，结合语言认知规律开展有效的多模态教学。
本文结合教学实践从以下三方面探讨英语专业视听课程的多模态教学实施。
一、转变教学理念，提升多模态教学能力随着媒体工具和网络系统进入教学领域，英语视听教学面临来自技术和网络两方面的挑战，督促着教师积极转变教学理念，进行教学模式的革新。
首先，英语视听教学已经摆脱了传统教学中的录放音机、粉笔加黑板的教学模式，取而代之的是以ppt、cd-rom等类型的多媒体课件向学生呈现教学内容。
多模态话语分析理论在新媒介时代的应用
多模态话语分析理论在新媒介时代的应用20世纪90年代西方兴起的多模态话语分析,逐渐成为语言学研究的新热点之一。
通过回顾其在国外和国内的发展历史,重点解释了多模态话语与社会符号学的关系,并展望未来发展方向。
标签：多模态话语分析;新媒介时代;社会符号学一、多模态话语分析理论朱永生(2007),只使用一种模态的话语叫做“单模态话语”;同时使用两种或两种以上模态的话语叫做“多模态话语”。
新媒介时代,语篇呈多模态化,20世纪90年代西方兴起的多模态话语分析(multimodal discourse analysis)为由多种符号组成的语篇分析提供了途径,帮助读者了解不同模态作为社会符号,如何共同作用构成意义,达到意义潜势,对提高人们多模式话语识读,具有积极的意义。
多模态话语分析属于社会符号学的分支,Halliday的系统语言学作为基础,具有跨学科、应用性强特点,能运用在语音文字、建筑、城市设计及规划、影视戏剧、音乐、PPT、教学和数据库广告、网站页面设计、大型演出及舞台表演、排版、音乐、教科书设计、教学等多领域,与传媒学、批评话语分析等有紧密联系,已经影响了当今很多学科的研究方向,如阅读写作能力教育、传媒话语分析、文化研究等,对社会的经济能起直接的指导作用。
该理论无论在国外还是在国内都处于起步阶段,在国外已经有出版书目和召开国际会议,李战子(2003)首次引入了多模态分析理论。
朱永生(2007),几个关键字的概念,模式(mode)、媒介(medium)与模态(modality)。
模式指系统功能语言学与话语范围(field)和话语基调(tenor)并列的语境三要素之一的话语模式,指交流渠道,如口头、书面、电子等。
模态(modality)原指语言系统中讲话者对事物的或然性进行判断和事物的必要性表明态度的语义系统情态;这里指交流的渠道和媒介,包括语言、技术、图象、颜色、音乐等符号系统。
媒介是表达信息的物理工具。
多模态视域下主流媒体短视频媒介语言特点研究——以《主播说联播》为例
一、问题的提出多模态话语研究兴起于20世纪90年代的西方国家，O'Toole(1994)、Kress和vanLeeuwen （1996/2006）开创了这个研究领域。
[1]多模态话语研究是在话语分析只注重语言系统和语意结构而忽视了图像、背景、声音、颜色等其他的意义表达形式的背景下出现的，将语言符号和其他社会符号视为独立而又相互作用的符号资源。
在分析研究对象语言特征时，考虑语言符号本身的同时，将视觉、听觉等符号资源也纳入考虑的范畴。
[2]经过多年发展，多模态话语分析已经脱离了单纯语言学的范畴。
近年来，短视频蓬勃发展，主流媒体为搭上短视频发展的快车，纷纷打造并推出自身的短视频栏目，《主播说联播》栏目正是在这样的背景下应运而生。
与《新闻联播》相比，《主播说联播》一改以往严肃的面孔，以活泼、生动的语言来解说社会热点，发表评论看法。
从中也不难窥探出，主流媒体紧跟时代步伐，积极尝试话语风格的转变。
在当下主流媒体话语风格转型之际，从多模态的角度来洞察主流媒体的话语方式转变，有着重要意义。
关于多模态的判断标准有两条，首先是看涉及模态的种类，有两个及以上即称为多模态，比如在观看视频过程中既要用到视觉，也要用到听觉。
其次是看涉及的符号系统有多少，通常来说涉及到两个及以上即可称之为多模态，这里的符号系统指的是图像、声音等等。
就《主播说联播》来看，受众在观看视频的过程中，既要用耳朵听，也要用眼睛看。
同时，节目中涉及到图像、字幕、声音等等符号系统，符合了多模态的判断标准，因而该栏目是以多模态的形式呈现出来的。
本文从多模态的角度对《主播说联播》栏目的短视频内容进行分析，总结其媒介语言特点，进而以小见大，管窥主流媒体在新媒体环境下话语方式的转型与重构。
二、研究对象和研究方法（一）研究对象本文选取短视频栏目《主播说联播》作为研究对象，主要基于以下两点考量。
其一是创办时间较长，反响较好。
该栏目创办于2019年，每期多模态视域下主流媒体短视频媒介语言特点研究——以《主播说联播》为例○李伟【摘要】在新媒体环境下，融合转型、丰富媒介语言，以更加通俗易懂、有趣生动的语言传播新闻信息，已经成为主流媒体共识。
美国《时代》杂志封面互动意义的多模态话语分析
3、促进文化交流
美国《时代》杂志作为全球性的新闻周刊，需要传递不同国家和文化的声音。 封面互动作为杂志的重要组成部分，可以通过多模态话语分析来传递不同文化之 间的交流与碰撞，帮助读者更好地理解和接受不同文化之间的差异。
二、案例分析
以美国《时代》杂志2021年某一期封面为例，探讨多模态话语分析在封面互 动中的应用。该期封面主题为“全球疫情下的希望”，图像元素包括地球、疫苗 接种针管、口罩等，文字元素包括“希望”、“团结”等关键词以及一些短句。
2、社会认可度
该期封面所传递的信息符合当时全球社会的点，即如何在疫情下保持希望和 团结。封面上的元素呼应了人们对于战胜疫情、恢复正常生活的期望，引起了广 大读者的共鸣。此外，封面的设计简洁而有力，色彩和谐，也体现了杂志对于社 会责任的担当和对读者情感的尊重，从而获得了社会的高度认可。
3、文化交流
感谢观看
针对以上不足，本次演示提出以下建议：首先，编辑可以运用多模态话语分 析理论对新媒体平台上的封面互动进行深入研究，以更好地把握网络读者的需求 和兴趣；其次，编辑可以通过量化研究和质性研究相结合的方法，对封面互动的 效果进行综合评估；最后，编辑可以注重跨文化、跨领域的合作与交流，以拓展 封面互动的文化内涵和影响力。
1、传播效果
该期封面通过图像和文字等多种模态符号，向读者传递了全球疫情下的积极 信息和希望。视觉上，地球象征全球，疫苗接种针管和口罩则代表了团结和防护， 这些元素组合在一起，使封面具有很强的视觉冲击力和吸引力。文字上，关键词 和短句则直接传达了希望和团结的主题，与图像元素相辅相成，使传播效果更加 显著。
该期封面通过多模态话语分析，展示了全球疫情下不同国家和地区的抗疫行 动和团结互助的精神。这种精神是跨文化、跨地域的，可以促进不同文化之间的 理解和交流。同时，封面的设计也向读者传递了美国《时代》杂志作为全球新闻 周刊的文化多元性和开放性。
多模态语篇分析_信息时代的新视角_胥国红
山东外语教学 Shandong Fore ign Language Teaching Journal 2009年第2期(总第129期)多模态语篇分析)))信息时代的新视角胥国红,曲航(北京航空航天大学外国语学院,北京 100191)基金项目:本文为国家社科基金项目/外语教师课堂话语与教师发展0下的子课题/多模态的视角0的研究成果之一,项目编号:07BYY032收稿时间:2009-02-10作者简介:胥国红(1969-),女,汉族,湖南人,副教授,北京师范大学外文学院在读博士。
研究方向:语篇分析,社会语言学,二语习得,外语教学。
曲航(1972-),女,汉族,黑龙江人,讲师,硕士。
研究方向:二语习得,外语教学。
摘要:多模态语篇分析研究的是语言、图像、声音、身体语言、空间布置等多种符号系统的意义构成,它突破了传统语言学以语言为核心的单模态分析法的局限,是针对信息时代大量涌现的计算机介入性语篇的分析新视角。
本文从多模态和多模态语篇分析的发展、主要人物及研究成果、以及在中国的发展这三个方面进行了综述性介绍。
关键词:多模态语篇分析;社会符号学;系统功能语言学中图分类号:H0-06 文献标识码:A 文章编号:1002-2643(2009)02-0003-051.0引言在过去十年中,语篇分析学家们日益清晰地认识到语言只是意义生成的手段之一,谈话时的手势、面部表情、身体语言,书面作品中的排版、插图,以及戏剧中的音乐、舞蹈、服装等,都是生成意义的符号模态(semiotic modes)。
尤其是随着计算机和因特网技术的发展,人们的交际变得更加多模态化和多媒体化。
因此,传统语言学家采取的只分析语言或以语言为核心的单模态分析法已不能全面地解释意义生成和交际。
多模态语篇分析的出现,为信息时代的语篇分析提供了一个新视角,极大地丰富了语篇分析的研究手段。
本文将对多模态语篇分析的产生和发展、主要人物及其研究成果、在中国的发展进行介绍,希望能帮助国内有关学者了解多模态语篇分析的理论和方法,并为推动多模态语篇分析在国内的发展尽一份绵薄之力。
- 1、下载文档前请自行甄别文档内容的完整性，平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益，请联系客服反馈,我们会尽快为您处理(人工客服工作时间：9:00-18:30)。
多模态话语分析理论在新媒介时代的应用作者：李妙晴来源：《学理论·下》2009年第06期摘要:20世纪90年代西方兴起的多模态话语分析,逐渐成为语言学研究的新热点之一。
通过回顾其在国外和国内的发展历史,重点解释了多模态话语与社会符号学的关系,并展望未来发展方向。
关键词:多模态话语分析;新媒介时代;社会符号学中图分类号:H04文献标志码:A 文章编号:1002—2589(2009)14—0204—02一、多模态话语分析理论朱永生(2007),只使用一种模态的话语叫做“单模态话语”;同时使用两种或两种以上模态的话语叫做“多模态话语”。
新媒介时代,语篇呈多模态化,20世纪90年代西方兴起的多模态话语分析(multimodal discourse analysis)为由多种符号组成的语篇分析提供了途径,帮助读者了解不同模态作为社会符号,如何共同作用构成意义,达到意义潜势,对提高人们多模式话语识读,具有积极的意义。
多模态话语分析属于社会符号学的分支,Halliday的系统语言学作为基础,具有跨学科、应用性强特点,能运用在语音文字、建筑、城市设计及规划、影视戏剧、音乐、PPT、教学和数据库广告、网站页面设计、大型演出及舞台表演、排版、音乐、教科书设计、教学等多领域,与传媒学、批评话语分析等有紧密联系,已经影响了当今很多学科的研究方向,如阅读写作能力教育、传媒话语分析、文化研究等,对社会的经济能起直接的指导作用。
该理论无论在国外还是在国内都处于起步阶段,在国外已经有出版书目和召开国际会议,李战子(2003)首次引入了多模态分析理论。
朱永生(2007),几个关键字的概念,模式(mode)、媒介(medium)与模态(modality)。
模式指系统功能语言学与话语范围(field)和话语基调(tenor)并列的语境三要素之一的话语模式,指交流渠道,如口头、书面、电子等。
模态(modality)原指语言系统中讲话者对事物的或然性进行判断和事物的必要性表明态度的语义系统情态;这里指交流的渠道和媒介,包括语言、技术、图象、颜色、音乐等符号系统。
媒介是表达信息的物理工具。
采用某一种媒体仍可以有不同模式表达信息,同样的模式可以用不同媒体表达。
二、研究现状辛志英(2008)大致有:社会符号学流派,包括O’Toole、Kress、Leeuwen、Lemke、O’Halloran、Baldry Thibault和Ventola等;交互社会学流派,包括Scollon、Norris及Jewitt等;认知学流派,主要有Forceville和Holsanova等人。
社会符号学认为语言以外的其他符号系统也是意义的源泉,认为多模态话语本身也具有系统性,多功能性,即同时具有概念功能、人际功能和语篇功能;认为语境因素和多模态话语的意义之间有着密不可分的联系。
Hodge&Kress(1978)《社会符号学》,以Halliday(1978/1994)的系统功能语言学为基础,把对语言社会符号性的研究扩展到二维平面空间如图像:Kress & van Leeuwen(1996)的《阅读图像》主要分析图像等符号在语篇中的作用,重点探讨图像中的人物、地点和事物是如何组成视觉模式,实现其再现意义、互动意义和构图意义。
O’Toole(1994)主要从级阶的角度来分析图象。
Lemke(1998)探讨了科学文章中图表与文字的关系;O’Halloran(1999)探讨了数学公式与语言之间的转换;Royce(1998)探讨了广告中图像与文字的关系。
Martinec&Salway(2005)、Len(2006)则详细地探讨了新旧媒体中的图文二者关系。
二维平面中的图文关系:胡壮麟(2005)在PPT;成文&田海龙(2007)对2003年发布的SARS新闻病例报告进行批评性分析;丁建新(2007)探讨了童话插图中的情态意义;王红阳(2007)探讨诗歌中排版的问题。
田璐&刘泽权(2008)对上海世博会会徽进行分析。
程春松(2008)对电影海报的进行多模态话语解读。
广告:励松青(2005)、莫少斌(2006),王红阳(2007)、胡丹(2007)探讨了纸质广告中多模态话语,主要是画面与文字的互动。
韦琴红(2008)探讨了多模态媒体语篇。
电影:李妙晴(2007,2008)探讨了电影中静态画面及动态画面的多模态意义,从主题类型、结构、场景、人物、视角、片名和海报如何进行多模态互动。
李战子&向平(2007)着重分析《一个馒头引发的血案》flash的类型步骤。
介绍及综述性文章:胡壮麟(2007)论述了多模态与计算机符号学的关系;朱永生(2007)论述4个问题:多模态话语的产生、定义、性质和理论基础、内容、方法和意义。
声音、音乐(van Leeuwen,1991,1999))分析了话语声音、音乐、音响之间的关系。
三维空间中,身体动作(Martinec,1998)和戏剧空间设计(Martin&Stenglin,1997,2006)。
在教学上,Lemke(1990)、Jewitt&Kress(2003)、Jewitt(2006)研究了儿童习得和多模态话语习得。
1996年,来自美国、英国和澳大利亚的十多名学者来到美国,共同商讨新形势下的教育改革,新伦敦小组(New London Group)是多元读写研究的开端,认为随着信息技术的发展,当今世界发生了两个变化:第一个变化是文化多元化趋势,第二个变化是新型交际技术的发展,文字表达意义的做法正在与视觉、听觉、手势等彼此结合。
多元读写教学法设计来帮助学生能适应变化,迎接语言文化多元化、交际技术样化挑战,应该培养学生的多模态识读能力(multiliteracy)(Cope and Kalantzis,2000 p.9),认为包括以下四方面:1.实地操练;2.明确指导;3.批评性框定;4.操练。
曾蕾(2006)在三维空间中身体动作——国际会议演讲语篇等领域进行了多模态分析。
Baldry&Thibault(2006)的多模态记录,Bateman(2004)等建立多模态语料库管理平台MCA(Multimodal Corpus Authoring)。
顾曰国建立了汉语现场即席话语多模态语料库。
王立非&文艳艳(2008)主要介绍多模态分析软件ELAN以及该软件的主要功能,并举例说明如何利用ELAN开展应用语言学研究,并指出多模态研究方法应用的价值和重要意义。
在应用上,有探讨语篇与技术的关系(LeVine&Scollon,2004)和应用文集(O’Halloran,2004)。
电子语篇中的图文关系叶起昌(2005、2006)),探讨了传统符号学对图文关系的总结:并提出在后印刷时代话语、超文本中图像与文字的关系。
曾蕾&梁红艳(2007),认为多语式表现超链接及其内容。
李妙晴(2007)探讨了中国同学录电子语篇的特点。
教学:陈瑜敏&秦小怡,(2007,2008)考察教育语境下介入意义在多模式语篇中的图文体现形式,顾曰国(2007)探讨了多模态在网络教学中的应用;曾方本(2008)探讨了多模态与技术的关系。
张德禄(2009)提出一个多模态话语分析综合理论框架探索。
由此可见,多模态话语分析在中国的研究主要集中在视觉模态和文字模态相结合的二维平面研究,对于视觉模态+声音模态+文字的多模态语篇、空间模态的语篇较少涉及,在教学上和英语语料库中更是基本处于萌芽状态。
三、结论朱永生(2007)也展望在未来的发展重点:第一个趋势是对多模态互补作用的更加关注,第二个趋势如从二维话语分析走向三维话语分析,从静态研究走向动态研究等。
Simpson(2003,转引胡壮麟,2007),提出如下选题方向:多模态化和新的媒体,在学术和教育情境下的多模态化的应用,多模态化与识读实践,多模态化语料库的建立,多模态化和类型学,多模态化话语分析及其理论问题。
多模态化话语分析包括互联网在话语分析中的作用,社会研究中的多模态话语分析,教育语境下的多模态话语分析,工作场所的多模态话语分析(Levine & Scollon2004)。
将来要既着手分析视觉模态、文字模态的互动,也研究视觉模态、声音模态、文字模态的互动,还开展研究音乐模态与文字模态的结合,这是对多模态话语分析在国内尚未对声音模态研究零的突破;对网络时代下,多媒体情况下自主学习及与课堂教学的结合作了详细的分析,分析了视觉模态、声音模态、文字模态、动作和手势等多模态的特性及互动。
可见涉及面比之前研究更广,更加复杂及走向动态研究。
将对建筑、城市规划、展厅、大型表演等作多模态话语分析。
对更为复杂的多模态共存的语篇如电影、音乐、建筑进行研究,因为从事多模态话语分析的绝大多数是语言学者,而多模态话语分析是跨学科的。
多模态话语分析理论的哲学基础、多模态话语语料库、多模态系统功能分析软件、超模态、在动作、手势中的体现等都有待研究。
参考文献:[1]Baldry,A.P.and Thibault,P.J.Multimodal Transcription and Text[M].London:Equinox.2006.[2]Cope,B.and Kalantzis,C(editors for the New London Group)(2000)Multiliteracies:Literacy Learning and the Design of Social Futures London:Routledge.[3]Hodge,B.and Kress,G.Social Semiotic[M]s.Cambridge:Polity.(1988).[4]Jewitt&Kress,Multimodal Literacy[M],Newyork:Perter Lang Publishing,2003.[5]Jewitt,Carey,Technology,Literacy and learning[M],Newyork:Routledge,2006.[6]Kress,Gunther & T van Leeuwen.Reading Images:the Grammar of Visual Design[M].London And Newyork:Routledge.1996.40-1.[7]Kress,G.and Van Leeuwen,T.Multimodal Discourse[M].London:Arnold.(2001).[8]O’Halloran,K.(ed.),Multimodal Discourse Anal ysis[M].London:Continuum,2004.[9]O’Toole,M.The Language of Displayed Ar[M]t.Leicester:Leicester University Press.(1994).[10]Van Leeuwen,T.and Jewitt,C.(eds)Handbook of Visual Analysis[M].London:Sage.(2000).[11]顾曰国.多媒体、多模态学习剖析[J].外语电化教学,2007,(4).[12]胡壮麟.社会符号学研究中的多模态化[J].语言教学与研究,2007,(1).[13]李战子.多模态话语的社会符号学分析[J].外语研究,2003,(5):1-8.[14]朱永生.多模态话语分析的理论基础与研究方法[J].外语学刊,2007,(5).[15]朱永生.多元读写能力研究及其对我国教学改革的启示[J].外语研究,2008,(4).[16]辛志英.话语分析的新发展———多模态话语分析[J].社会科学辑刊,2008,(5).[17]张德禄.多模态话语分析综合理论框架探索[J].中国外语,2009,(1).(责任编辑/石银)。