王平平 洪雅妮

内容摘要：二语学习者的口语产出作为重要且棘手的问题一直受到学界的高度关注，但鲜有研究提及到口语产出中的多模态特征。本文运用多模态的方法，基于张德禄构建的多模态话语分析的综合理论框架，借助ELAN5.5作为多模态视频分析软件，对2名研究生产出的英汉口语中涉及到的符号模态做定量标注，并对收集到的数据进行定性分析。研究显示：（1）在语言层面上，相较于汉语口语产出，两名被试的英语口语产出存在一些问题，表现在语速慢，停顿多;句子声调单一，倾向于使用降调等。（2）在非语言层面，两名被试的个体差异较大，动作特征因人而异，但存在的共同问题是目光交流偏少。

关键词：多模态话语分析 口语产出 ELAN

1.引言

Vygotsky（1978）认为语言习得是将认知过程和社会活动联系在一起的社会文化现象，是个体与外部世界不断相互作用的结果。这一过程是间接的，需借助中介工具调节完成，这些中介工具包括物质工具（如电脑）和心理工具/符号（如语言）。除语言本身外，非语言手段（如手势），也具有认知和交际双重功能（McNeill，1992）。然而，人类的交际方式多种多样，因此仅仅关注语言和手势是不全面的。例如，本文所关注的二语学习者的口语产出就具有很强的多模态性，语调、语速、头部移动、面部表情、眼神、手势等都在口语产出中发挥作用。20世纪90年代兴起的多模态话语分析（Multimodal Discourse Ananlysis）则可以在很大程度上克服目前二语习得研究的局限性，将对语言的研究扩展到其他表达意义的符号资源，如图像、声音、动作等。……