APP下载

基于任务型的航海英语口语测试体系

2010-04-10

航海教育研究 2010年4期
关键词:评分标准被试者航海

(武汉航海职业技术学院,武汉 430062)

为了提高我国船员的英语水平,适应STCW公约的要求,国家海事局从1997年开始对所有参加二/三副、二/三管轮以上船员适任证书考试的人员增加航海英语听力与会话评估考试,这一措施在一定程度上推动了船员的英语学习。但是相对于较高的通过率,中国船员的英语水平,尤其是口语水平并未得到根本性的提高。不少专家认为,这一结果与评估考试的反拨作用导致的应试倾向有关。笔者认为,缺乏对航海英语口语测试的理论和实践的研究,缺乏科学的测试体系,是导致以应试为中心的一个根本原因。笔者通过对任务型口语测试的理论探讨,结合航海英语口语的特点,分析影响航海英语口语测试信度和效度的因素,提出建立基于任务型的航海英语口语测试体系。

一、口语测试的理论基础

1.任务型口语测试理论

从20世纪90年代开始,语言交际能力理论的提出不但促进了交际法语言教学,还使交际性语言测试的理论和实践得到语言教育界认同。交际法语言测试的目的就是要评价语言学习者在真实且有意义的交际语境中运用语言的实际能力。

任务型语言测试基于交际语言能力测试理论,任务型语言测试通过任务型试题来有效地提取考生完成交际活动时目的语运用的样本,通过考生在完成交际任务中的语言运用情况来推测出测试环境之外的考生实际语言运用的能力。因此,任务型测试的核心是任务,测试项目的选择和编写均应以任务为基本单位。测试中使用的任务应是“现实生活中使用的语言任务的取样”,[1]其特征必须和实际生活中的语言运用任务特征相一致。

2.任务型测试研究核心

(1)任务的真实性。Bachman提出应该从以下两个方面来定义测试任务的真实性:情景真实性和交际真实性。[2]所谓情景真实性,就是指测试方法特征与某一特定目的语使用的情景特征相关的程度。也就是说,在命制考题时,考试任务的特征必须与将来目的语使用的情景特征相一致。而交际真实性指的是考生在完成某一测试任务时,其语言交际能力的哪些方面参与完成该测试任务,参与的程度如何。

(2)任务的难度。为了真实公平地评价应试者的语言交际能力,即提高口语测试的效度,对同一被试群体测试所选择的任务应该处于相同的难度级别。但是关于任务难度的描述和定义在测试界迄今仍没有很完善的说法。

为探究任务在任务型评价中如何用来评价学习者的语言运用能力以及任务的作用,首先要对“任务”的概念进行界定。Bygates、Skehan和Swain认为,假如测试是在语言教育的范畴内,那么,“任务即是一种活动,这种活动需要学习者注意意义,并通过语言的活动达到某个目的。同时,这种活动很有可能会提供给教师和学习者一些有助于教学的信息”[3]。该定义反映了任务目的的两重性,一是任务本身所包含的非语言学习目的,二是任务设计者所期望任务参与者达到的语言学习目的。

Crookes通过观察学生在课堂上完成各类任务的行为表现列举了5种可能引起任务难度的因素:(1)完成任务所需的步骤;(2)参与完成任务的各方;(3)完成任务所需的知识;(4)任务对于智力的挑战性;(5)空间-时间间距。他提出从两个方面对任务进行分类:(1)根据任务特点的描述:任务目标,语言输入刺激,完成任务步骤,回应及刺激-回应间的关系;(2)根据任务对人的能力要求。根据综合能力要求和任务特点而确定的任务难度就代表任务的分类[4]。因此,在设计任务型测试时,除尽量保持测试任务与真实的交际任务一致性外,更重要的是要对任务难度有明确的描述分级。

3.口语测试的类别、方法与评分标准

(1)口语测试的类别。在日常教学中,按照学习阶段来分阶段性测试,如随堂测试和期中、期末测试等。同时,这些测试也可用来考查学生对所学知识的掌握,可以当做成绩测试。水平测试则用来测试学生的语言能力,看其是否达到某一水平,从而决定其是否胜任某一项工作。这种测试与过去的教学内容和学习方式没有直接联系。从这个意义上来讲,海事局举办的航海英语听力与会话评估测试应当属于水平测试。

(2)口语测试的方法。口语测试的方法有直接型口试(OPI),即通过应试者说话来评判其口语交际能力,其考试形式有多种,如面试、会话、讨论等。直接型口试方法是根据考生的表现直接进行评分。在一些大规模考试中,由于考生多、考官少,做不到直接对所有的考生进行口试,于是采取半直接型口试(SOPI),即把事先准备的问题录制在磁带或光盘上,让考生根据磁带或光盘上的提问或其他的要求回答问题,或描述一个话题,并将回答录制成磁带或光盘,然后由考官根据考生的录制结果进行评分。目前,海事局的航海英语听力与会话评估采用的就是这种半直接型口试。

(3)口语测试的评分标准。口语测试评分标准的作用在于保证测试能够准确、公正地测试出考生目的语运用的能力,即考试的效度;保证考官评分的一致性,即考试的信度。评分标准主要涉及考生话语输出的准确性、 流利性、 适切性以及口语交际的互动性。评分方法主要分为分析法和综合法。标准化口语测试通常采用分析法和综合法相结合的方法进行评分。

分析法是把口语分解成若干要素,如语法、内容、语音语调、流利程度、准确度、词汇等,评分人员根据一定的标准对不同的要素(可做不同的加权处理)分别打分,各要素得分总和即为总分。综合法是评分人员根据一定的标准,凭总体印象给考生打分。综合法能从整体上把握考生口语表现,效度比较高;分析法注重口语的各组成要素,更为客观一些,信度较高。因此,一些大规模标准化口语测试,如剑桥大学考试委员会的口语测试,都是采用分析法和综合法相结合的方法来评分,既保持总体印象又不忽视口语的各个要素。

二、航海英语口语特点及测试任务设计

1.航海英语口语的特点

Ellis和Johnson曾讨论过作为特殊用途的商务英语的特点有目的性、跨文化交际性和准确交流性。[5]其实,同样作为特殊用途的航海英语口语也有类似的特点:其一,很强的目的性。航海英语使用者的目的是完成某项任务,达到某个目的而非仅仅学习使用这种语言。其二,航海英语同样面临跨文化交际,要能让来自不同文化背景、不同母语的人愉快地理解、接受、交流,必须要掌握能为不同文化所共同认可的礼貌的说话方式,即跨文化的交际策略。其三,作为工作用语,清晰准确的交流是必需的。 根据航海英语口语的特点,采用任务型测试能比较真实地测试被试者在航海作业中的英语口语交际水平。

2.航海英语口语测试的任务设计

就任务型试题的真实性来讲,航海英语口语测试应以真实的驾驶员日常工作和环境为基础,提炼出常见且典型的语言交际的任务模块。任务型测试的难点在于如何判定测试任务的难度。现有的航海英语听说教材或学习资料,大部分只按驾驶员的工作流程罗列出一些驾驶员的工作,还有一部分是把完成各种任务可能用到的句子罗列出来,如标准海事通信用语,即只有任务内容,没有任务难度的分级。虽然目前航海英语口语评估题库按驾驶员职务不同对试题进行了简单区分,但这种区分很粗糙,仍然缺乏针对性和区分度。根据Crookes 的任务分类法,从任务自身的特点和对被试者的能力要求来区分任务难度,以下从任务目标、语言输入刺激、完成任务步骤等几个方面来分析这些因素对航海英语口语任务型测试的任务难度的影响。

(1)任务目标:任务型口语测试的任务目标不同于实际工作中的任务目标。因为这个目标不仅关注是否能完成实际任务,还关注在完成实际任务过程中语言使用的目标是否达到。比如向接班驾驶员交班,交班驾驶员要交接清楚船况、设备状况、无线电、气象、船长命令等内容,任务涉及的专业内容比较多。相比较申请破冰援助,驾驶员要说明船况、船位、表示申请援助等,专业内容相对较少,因此,前者的难度可能要大于后者。

(2)语言输入刺激:测试时,输入内容(熟悉或不熟悉)、语言输入的方式(口头或书面)、语篇的长度、语篇中低频词出现的比例、口头输入时说话者的语速和口音等因素,可能都会影响到任务难度。如同样是回答问题,一般来讲,以howwhy开头的问题要比whatwhenwhere,或一般疑问句的问题回答起来要困难一些。同样是回答whatwhenwhere开头的问题,如果是问被试者熟悉的个人情况,就比询问专业情况更容易。

(3)完成任务步骤:任务步骤从另外一个方面反映任务的复杂性。但是,在现有的口试测试方式中,只有直接测试才可能涉及任务步骤,才有互动和话语的转换,而在半直接或间接测试方式中,被试者只是回答或描述说明。因此,完成任务步骤,只存在于直接测试的方法中,可能对任务难度造成影响。在直接测试的方法中,完成任务步骤越多,被试者所需交流的话语转换就会越多,需要较强的语言交流能力和交际策略。因此,任务难度有可能更大一些。

三、建立航海英语任务型口语测试体系

目前的航海英语口语评估测试已经被不少专家质疑,主要问题是针对口语评估测试的信度和效度。就效度而言,目前的航海英语口语测试,题库内容少,题型单一,试题缺乏难度分级,考试内容过多关注专业内容,而缺乏对考生的语言应用能力的考查,考试的方法均为人机对话,因此所得结果很难准确反映考生专业英语的口语交际能力;在考试信度方面,没有明确统一的评分标准,各位评分员各自为政,无法保证信度。而且,这种评估测试带来的反拨作用是一种应试的倾向,不利于引导学生在人际交往中培养交际能力。

为了提高航海英语口语测试的信度和效度,促进被试者真正提高语言交际能力,建立一个完善科学的测试体系是非常必要的。这种测试体系必须具有可信度、有效性和可行性。可信度指被试者在体系内的不同次的测试,结果应该是相同或相近的;有效性指测试的结果可以反映测试的意图或目的;可行性指测试的可操作性和它对教学的指导和促进作用。这个测试体系应该包括考试大纲、试题库、评分标准以及相关的试题库管理软件。体系不仅关注最终的国家海事局的水平评估测试,还要对平时教学的阶段性测试有相应的描述。

1.考试大纲

考试大纲可分为阶段性测试大纲和终结性水平测试大纲。阶段性测试大纲与教学大纲、教学过程密切相关,包括阶段性测试的目标、内容、方法和评价标准。终结性水平测试大纲与职业要求的语言水平紧密相关,而与学习者的学习背景没有直接关系。在描述测试目标时,应从知识、能力、素质等方面全面考虑。考试方法应采用可全面测试被试者综合语言能力的任务型测试法。口语测试的方式应尽量结合航海英语口语的特点采用直接型口试。

2.试题库

口语试题库的设计需考虑试题内容、题型和难度分级。试题内容除满足STCW公约的要求外,还要根据船舶驾驶员不同职务、不同专业内容进行分类,保证试题覆盖面的全面性,同时又有针对性和区分度。试题的题型设计要提供真实的交际任务,能够全面考察被试者的综合能力包括语言知识、技能和交际策略。所有试题应该进行难度分级,难度分级要结合试题任务本身的特点和对被试者的能力要求。

3.评分标准

口语测试的评分标准主要涉及考生话语输出的准确性、流利性、适切性以及口语交际的互动性。平时阶段性测试可采用分析法评分,能够较准确判断学生在交际中的问题。对大规模的考试可采用分析法和综合法相结合,重要的是对所有评分员进行评分标准的培训,针对几种典型答题,根据评分标准首先进行试评估,以保证评估员对评分标准的统一理解,尽量缩小评估员个体之间差异。

四、结 语

作为一种职业语言能力的考核,航海英语口语测试应该着重于对航海英语在驾驶员工作中的运用能力的考核。建立任务型的测试体系不仅有利于准确考核被试者的实际语言运用能力,其反拨作用也可以促进航海英语口语教学朝着培养学生语言交际能力的方向发展。

[1]韩宝成.语言测试的新进展:基于任务的语言测试[J].外语教学与研究,2003(5):352-358.

[2]陈 菁.从Bachman交际法语言测试理论模式看口译测试中的重要因素[J].中国翻译,2002(1):50-52.

[3]ELLIS R.Task-based language learning and teaching[M].Oxford: Oxford University Press,2003.

[4]NORRIS J M,BROWN J D,HUDSON T D.Examinee abilities and difficulty in task-based second language performance assessment[J].Language Testing,1986,19(4):395-418.

[5]ELLIS Mark,JOHNSON C.商务英语教学[M].上海:上海外语教育出版社,2002.

猜你喜欢

评分标准被试者航海
大航海争霸
德西效应
德西效应
古代航海有多牛
永远的格纹
航海博物馆
儿童花生过敏治疗取得突破
初高中英语作文评分标准初探
海峡两岸高考语文作文评分标准的比较研究
为什么我们会忍不住发朋友圈?