多模态视野下图文关系研究的机遇与挑战

刘成科1,2，颜志蓉1

(1.安徽农业大学 外国语学院，安徽 合肥 230036；2.中国科学技术大学 人文学院，安徽 合肥 230026 )

摘要：多模态理论研究正处于学术研究的活跃期。多模态中的语言和图像之间的关系问题更是该领域的研究重点。然而，目前学术界在多模态语篇中图文之间的地位关系、图文之间的意义冲突和互动关系等方面的认识还存在一定的分歧。因此，在梳理国内外图文关系研究的基础上，主要探讨了图文关系研究的核心课题、面临的主要挑战和可能的研究方法等，这既有助于丰富多模态语篇的理论研究，又将进一步拓展和完善读图时代下的图文关系研究。

关键词：多模态；语篇；图文关系；认知努力

多模态理论的系统研究主要始于20世纪末。然而，图文关系研究虽然只有短暂的历史，却有着久远的过去，甚至可以追溯到古希腊时代柏拉图的“线段之喻”。随着社会符号学和语言学等相关学科的迅猛发展，近几十年来，图文关系的研究不仅引发了学术界激烈争论，而且在相关的社会实践领域也产生了巨大的影响。

1图文关系研究概述

1.1　国外图文关系研究的主要流派

在国外学术界，很多学者都对图文之间的关系有一些零散的论述，如O’Halloran[1]，Kress &Van Leeuven[2]，Lemke[3]，Norris[4]和Jewitt[5]等，然而对图文关系比较系统的研究却并不多见。根据研究视角的不同，我们可以粗略地分为符号派、信息派、功能派和逻辑语义派。首先，以Barthes为主要代表的学者，从符号学视角来审视图文关系。……