基于自建多模态语料库辅助大学英语教学的多维探索

胡翩翩

【摘要】多模态语料库以语境模型为驱动的包含语言、声音、图像、动作等的多媒体语料库，它对实现大学英语教学的多样性和生动性，给学生创造多元的英语课堂和贴近现实的第二语言学习环境。本文从多模态语料库的概念和理论基础出发，继而阐述了多模态语料库的建立和针对大学英语的应用，旨在推进“以学生为中心”的大学英语教学改革。

【关键词】多模态语料库;Elan;大学英语教学

一、引言

随着现代信息技术的不断更新，互联网与各个领域的结合日益紧密，这也就意味着除了课堂，学生获取各类学习资源的途径也越来越多样，自主学习的实现也将越来越容易。

在此背景下，在语言教学中使用多模态教学模式已经逐渐成为一种趋势。“多模态手段能够节省人力物力，能够提高教學效果，在很多方面优于传统教学手段”。同时，为进一步提高教师的教学效率与学生学习的方向性，自建多模态语料库将成为大学英语教学的一个行之有效的辅助，不仅能推进听说读写各种课堂活动的展开，更能进行课后的实时评价与反馈，对学生英语应用能力的提高大有裨益。

二、多模态语料库的概念及理论基础

1.多模态语料库的概念。语言是包含声音、文字、图像、符号等多种模态的。语料库是将大量语言类资源通过科学化处理进行有序存放的电子文本库，语料库的三个特点包括：首先，语料库中存放的是在实际运用过程中出现的语言材料;其次，语料库是语言知识的载体，不是其等价物;最后，语料库中包含的有效语料是在原始语料经过加工处理后形成的。

多模态语料库是建立在言语理论基础之上，以言语活动为研究对象，以从原始数据中抽取信息和知识为手段，以语境模型为驱动的囊括整个言语活动的语言、声音、图像和动作的多媒体语料库。与传统语料库相比，多模态语料库的语料来源不局限于文本类材料或听说训练的原文，而是形式多样的多媒体资料，如音频或视频等。新型多模态语料库能为大学英语教学，特别是视听说教学提供丰富的语言资料并还原大量真实的语言场景，从而最大程度地激发学生的学习动机，让学生可以随时随地进行自主学习不受时间和场地的限制，对他们自主学习能力的培养十分有利;在其辅助下，学生能总结出相应的语言规律，成为学习的“主人”。

2.多模态语料库的理论基础。

（1）建构主义学习理论。建构主义学习理论认为学生不是信息的被动接受者，而是主动的知识建构者，教师也相应地从教学的中心转变为学习的指导者和学习环境的创设者。传统英语教学中，由于受时间和空间的限制，教师总是苦于如何在教室里真实还原第二语言的语境。没有原汁原味的语境，教学的重点往往集中于语言点的教学，学生语言应用能力的培养效果会因此大打折扣。

多模态语料库的建立能为教师提供了大量高质量的地道语料，并可将其用于教学供学生学习，不管是课堂教学还是课后自主学习，教师和学生都变得有理可依，有据可循。这种模式与克拉申的“语言输入”理论不谋而合，学生可根据自身英语水平检索有效语料，所谓有效语料即对学习者而言在其学习水平之上适中难度的语言资料。

（2）情境认知理论。情境认知理论是在行为主义“刺激 - 反应”学习理论与认知心理学的“信息加工”学习理论后发展起来的一个理论派别。该理论认为语言的学习必须是在一定情境内完成的，所有的教学设计都应围绕学生展开，使学生在真实的场景中学会并应用知识，大量的真实语境能极大地提高学生的自主学习意识及语言应用能力。多模态语料库的资源大多来源于现实生活，学生在碰到类似场景时则会更深层次的理解并且更自如的运用所学语言知识。因此，情境认知理论对多模态语料库驱动的语言学习极具指导意义。

（3）多元识读教学理念。20世纪90年代，以一批语言学家为代表的新伦敦小组提出了“多元识读”的概念，以重新认识当今教学的使命以及识读教学的未来。他们认为在社会文化相互渗透、科学技术变化迅速的今天， 这个概念的提出有两个重要的理由： 一个是通讯渠道和多媒体的多重性， 二是文化和语言的多样化日益突出。多元识读理念提倡利用网络、图片、角色扮演等多种渠道和多种教学手段来调动学习者的各种感官，使之协同运作参与语言学习，即多模态教学。多模态语料库驱动的语言学习作为多元识读教学的一种形式，让学生能够根据学习任务和自身兴趣搜素多模态语料资源，引导学生自发地总结语言特征。这种学习模式突破了传统被动接受的学习方式，有利于培养学生的思辨思维和自主学习能力;同时，多模态语料库驱动式的语言学习能利用多模态语言资源充分调动学生的各个感官进行主动学习。这种学习方式改变了“单纯依赖词语表达意思”的误区，促进学生进行多模态语言输出，让学生接触到真实的语境，体验文化差异。

三、大学英语多模态语料库的建立

1.语料筛选标准。根据大学英语教育的要求和学生的学习兴趣，在对语料库数据进行选择时需遵循以下四个原则：（1）真实性：优先考虑现代英语的使用和真实语言情境的再现;（2）准确性：语料库数据的内容需健康积极并符合大学生英语学习的难度;（3）综合性：从词汇、句法、语义、语用等方面选取不同题材的多媒体资源以反映语言学习的整体景象;（4）实用性：语料库数据的主题应具有实践性，使学生有机会将所学用于实践，感知东西文化差异。

依照以上原则，大学英语视听说多模态语料库适宜选择英语电影和电视剧作为音视频材料，如《老友记》、《阿甘正传》、《神探夏洛克》等，此类资源能真实地反映现实世界，并提供有吸引力的图片来调动学生的学习热情。学生在学习过程中能模仿母语学习者的发音，让其更重视语言的实际应用，同时也让他们有机会直接感受西方价值观及文化习俗。

2.语料处理工具。目前常用的多模态语料库标注与检索软件主要包括 ANVIL、Elan、MacVisSTA、DRS、Exmeralda、MCA 等，其中 Elan （ EUDICO Linguistic Annotator） 的功能最为强大，其主要功能包括：（1）显示语音或视频信号，并附有注释;（2）为媒体流等增加时间标注;（3）根据使用者的不同需要进行多层标注;（4）不同种类的文字设定;（5）以不同形式进行输入或输出以供进一步的分析标注。若将Elan用于教学，其标注功能和对音视频的控制功能则能完美体现。首先，它可以对音、视频文件进行多层标注，在自建语料库时需提前设置好不同层面的标注信息，并根据每层的“语言学类型”以界定其层级属性，Elan主要包含五种语言学类型，即：None（独立层）、Time subdivision、Symbolic subdivision、Included in 以及Symbolic association.教师可根据需要选择不同的标记及检索方式。其次，教师可对不同的语料进行自定义标注，特别是一些具个人特色的特殊文字和符号，这不仅方便后期检索，更能大大降低标注的错误率。再次，Elan能对视频片段的播放速度进行控制，被标注文件可呈现多重显示方式并且可以任意的重播。这给教学带来了极大的便利性。

3.语料处理过程。对多模态的语料处理主要分成以下五步。第一步，应下载最新版的Elan软件并根据电脑的操作系统选择不同的安装版本。第二步，双击进入Elan并通过点击其页面的“文件”后进入下拉菜单中的“新建”选定要处理的语料文件，如TED的演讲等，然后双击“确定”对该多模态语料进行导入。第三步，完成导入后应立即保存文件，并将系统设置的语料层名“Default”进行修改，如：英文字幕等;随后选择“选项”菜单中的“分割模式”将语料根据时间点进行分割并标记出来，如《神探夏洛克》中不同角色的对白;最后选择“选项”菜單中的“转写模式”对剧中的字幕进行改写。第四步，选择“选项”菜单中的“标注模式”对语料进行标注，如字幕、词汇、音标、主题等。第五步，完成标注后，点击“搜索”便可检索单个或多个语料文件，其后缀名为“.eaf”，使用者可以对语料进行不同层名的分析比对并可对其播放速度和模式进行随意控制。

四、多模态语料库针对大学英语教学的应用

大学英语是高等学校非英语专业的学生所必修的公共基础课，该课程的主要教学目标是循序渐进地培养学生英语综合应用能力，特别是听说能力，使他们在今后工作和社会交往中能用英语有效地进行口头和书面的信息交流，同时增强其自主学习能力、提高综合文化素养，以适应我国经济发展和国际交流的需要。授课过程中，以多媒体教学设备为载体，通过音、视频资源的播放使学生融入到第二语言的教学环境中，从而提高教学效率并增强学生的跨文化交际意识与能力。本文将以大学英语视听说教程为例探讨多模态语料库在教学上的应用。该教程以听说能力培养为导向，在听说训练中强化学生对词汇以及句法的掌握，以高频输入的方式带动输出，使学生的词汇量提升，口语交际能力增强，继而提高英语综合运用能力。

大学英语视听说教程每一单元分为两部分：listening and speaking 和video course. 每个部分的练习前都有词汇作为铺垫，进而让学生根据音频或视频完成相应的口语或书面练习。以“Fashion”这个单元为例，在listening的这个部分，首先给出了fashion、makeup、hiphop等词的双语释义。在教学时，教师可以尝试把如“makeup”这样容易激发起学生兴趣的词作为检索关键词，在语料库里通过多层标注匹配相关的关联词、图片甚至视频，让单词生动起来，从而加深学生对该词的理解;对于“fashion”这样的多义词，教师可在语料库里开启多窗口播放功能，让学生自行对比在不同情况下该词的使用情况，增强学生的词汇运用能力。在课后的自主学习任务布置方面，教师还可布置学生运用多模态语料库对词汇进行归纳总结，包括词汇的不同发音、固定搭配、词性变化等，让学生自主学习能力得到充分锻炼。Listening这个部分的听力练习是以音频为主，每个单元一般有三个音频，难度逐级上升且没有字幕。针对这个部分的特点，教师在制作语料库时，可以用时间轴划分音频的播放速度，对于比较难的片段，对关键词进行检索和定位，便可自动放慢速度进行精听练习，这对纠正学生的语音语调及听力水平都十分有用。另外，教师还可运用多模态语料库主题检索功能，对相关主题的地道表达方式进行对比，引导学生找到并归纳语言使用逻辑。Video course部分有两个视频供学生观看并完成相应练习。有些视频的内容过于陈旧且费解，很多学生在观看一会就会放弃，或者看完不知所云。多模态语料库中的丰富的语料可以作为该部分的有力补充，如热门电影电视剧、演讲、新闻等，在这其中教师不仅可以对语言信息进行标注，还可对非语言信息进行定位，如表情，动作等，这些多模态信息能加深学生对中西文化的比较和理解，对提高学生的跨文化交际能力有非凡的意义。

五、结语

在大学英语教学中，多模态语料库能够利用技术手段为学生提供原汁原味且方便好用的二语习得资料，更有助于培养学生的自主学习能力，这对当前大学英语改革的目标高度吻合，能真正实现让学生成为学习的主人，对推进我国大学英语教学改革具有重大意义。

参考文献：

[1]张德禄，丁肇芬.外语教学多模态选择框架探索[J].Foreign Language World，2013（3）：39-56.

[2]张霄军.多模态语料库：抢救濒危语言的有效途径.民族语言文字信息技术研究——第十一届全国民族语言文字信息学术研讨会论文集[C].北京：中国中文信息学会，2007：35-41.

[3]温彭年，贾国英.建构主义理论与教学改革——建构主义学习理论综述教育理论与实践，2002（22）：17-22.

[4]马龙云.基于情境认知学习理论的英语实践教学改革探索[J].教育探索，2012（8）：45-46.

[5]韦琴红.多模态化与大学生多元识读能力研究[J].外语电化教学， 2009（3）：28-32

[6]张振虹，何美，韩智.大学公共英语多模态语料库的构建与应用[J].山东外语教学，2014（3）：50-55.

[7]何美.大学英语多模态语料库建设与应用[M].天津大学，2014.