APP下载

2016-2019大学英语四级测试仔细阅读分析
——基于内容效度视角

2021-08-28蒋晶晶

科教导刊·电子版 2021年20期
关键词:仔细阅读内容效度大纲

蒋晶晶

(武昌首义学院外国语学院 湖北·武汉 430064)

阅读是日常生活和工作中最常用的技能,也是学习知识和获取信息的重要途径,在语言学习中阅读就显得尤为重要,而在语言测试中阅读测试的重要性也是不言而喻的。阅读能力,要通过阅读行为来测试,而阅读行为又体现在具体的阅读测试任务上。

根据BrownH.D(2013)的分类,阅读任务分为四种类型,即感知性阅读(perceptive reading)、选择性阅读(selective reading)、交互性阅读(interactive reading)和泛读(extensive reading)。每种类型的阅读任务,长度,关注点和阅读的过程不一样,任务侧重点也不一样。大学英语四级阅读测试任务中主要涉及了上述阅读任务类型的后三种,其中四级仔细阅读属于交互性阅读任务的类型,综合考查语言的形式和意义,但更侧重意义。读者通过阅读行为,从材料中提取恰当的意义,弄懂材料的内容。

效度是评估一项测试好坏的重要标准之一,如果阅读测试项目和应该被测试项目之间的匹配度高,那么这个阅读测试就是一个好的测试。效度验证的角度和层面比较多,但是无论效度如何分类,都会包括内容效度,足以说明内容效度是评价一项测试的重要标准之一。内容效度主要表现在考试内容的相关性和覆盖面,也就是考试所涉及的内容是否覆盖了考试大纲所规定的内容。对测试任务本身内容效度的验证是验证测试效度的有效方式之一。内容效度越高,就越可能准确测量它所要测量的内容。

大学英语四级考试(CET-4)的目的在于全面考核已修完大学英语四级的学生是否达到教学大纲所确定的各项目标,属于尺度相关常模参照性考试。根据《大学英语四级考试大纲》(2016修订版)(以下简称《考试大纲》(2016))说明,阅读理解部分注重从多方面、多角度、多途径考查考生阅读理解能力,所占分值比例为35%,包含词汇理解,长篇阅读,仔细阅读三项测试内容。

对试卷本身的研究及内容效度验证是验证测试效度的有效方式之一,本文依据Bachman和Palmer(1999)任务特征框架中的语篇输入与预期回答两个特征,以2016年6月至2019年12月CET-4仔细阅读为样本,对比《考试大纲》(2016)对阅读理解的要求,试图对仔细阅读的内容效度进行分析,了解近年大学英语四级考试仔细阅读部分的命题现状,为今后的命题和教学提供参考。

1 研究对象与方法

本研究的对象是2016年6月至2019年12月 CET-4共计24套仔细阅读,共48篇文章,题型为选择题,共计240道选择题。

语篇输入主要是针对阅读测试任务的文本本身,包括材料呈现形式和语言特征。主要包含文本分类,题材和文本难度,前两项主要通过经验判断和对英语四级阅读真题的解析结果得知,而文本难度通过量化的途径获取,本研究主要使用我国学者金檀、陆小飞等人(2018)研发的“iTEST英语文本指难针”为获取文本难度的工具。该工具运用计算机技术,从词汇难度、句子难度和文章长度等维度对文本进行语言特征量化分析。

预期回答指考生对测试任务做出的反应和输出,本研究主要分析四级大纲中提到的阅读测试任务要求的考查技能。语言测试重点关注的是对材料理解的结果,因为很难通过观察去了解考生理解文本的过程。而阅读能力评价不单纯是对文本理解程度的测试,也重在考查考生运用阅读策略理解文本的程度。因此,可以说阅读测试主要测的是两方面内容:阅读技能和阅读策略。Brown(2013)把阅读理解层次及相关技能做了细化,主要包括词汇知识,语法知识,篇章理解技能等,并且最终把它归成两大类:强调语义层次的微观技能和重在篇章理解层次的宏观技能。而阅读策略包括猜测词义或句意,略读文章,巡读等。

全国大学英语四级考试大纲关于阅读理解部分的内容,涉及了所要考查的材料类型,对阅读的要求,以及要考核的技能。本研究采取定性定量相结合的方法,将量化统计的结果进行总结,并与《考试大纲》进行对比,进而得出内容效度的分析结论。

2 分析与讨论

2.1 语篇输入

《考试大纲》(2016)对仔细阅读部分文本要求描述为:要求考生能读懂题材熟悉、语言难度较低的英语报刊文章和其他英语材料;能读懂工作、生活中常见的应用文体的英语材料,长度要求为每篇300-350词。

从文本分类的角度而言,48篇四级仔细阅读主要采取的都是信息文本。再对48篇阅读真题文本题材进行梳理,汇总如下:其中,社会类(13篇)、科普类(9篇)、健康(6篇)、文化(6篇)这几类文本出现频率相对较高,其他文本类型还包括教育(5篇)科技(4篇)、经济(3篇)和历史(2篇)。这些题材大都是考生比较熟悉的话题范畴,语言难度较低,多来自英语报刊文章,符合大纲要求。

对语篇输入的另一个分析角度是文本难度。在早期主要是可读公式阶段,如Flesch可读公式,将文本的词长和句长进行统计学的换算,对文本进行难度分级。之后,研究者们选用多个维度的特征指标,对文本难度进行量化计算,有代表性的如Coh-metrix、Text Easability Assessor等,从包含关联词使用,情景模式,句法复杂性等多维度指标分析文本难度。再往后的文本改编就进入了智能改编的阶段,如“iTEST英语文本指难针”(以下简称“指难针”)。研究者(郭凯,金檀,陆小飞,2018)建立了英语试题语料库,作为“指难针”的基准语料库,对阅读文本进行数据挖掘,通过多维特征的分析量化出文本的难度值,并把待测文本和国内大规模考试等级对接,最后出现量化的数据,显示文本的难度值,并且可以将它放在不同的难度等级中,其中四级文本难度值在2.4-3.5。此外,“指难针”还可以为改写、编辑提供参考,以达到辅助调整语篇难度的目的。

通过“指难针”,对近几年的四级真题阅读文本进行分析,汇总为下表:

篇数 平均词数 四级词汇覆盖 平均句长 平均难度值2016 12 352 96.73 19.69词 2.94 2017 12 347 96.65 18.33词 3.01 2018 12 342 96.30 18.02词 2.81 2019 12 343 96.76 19.49词 2.97均值 346 96.61 18.88词 2.93

结合“指难针”数据解释,可知近四年CET-4语篇文本类型、题材、文本长度均符合《考试大纲》要求,文本平均难度值介于2.81至3.01之间。

2.2 预期回答

对内容效度第二个层面的分析就是预期回答,即考点考查的技能。《考试大纲》对仔细阅读理解部分的叙述如下:采用选择题型,考核学生在不同层面上的阅读理解能力,包括理解主旨大意和重要细节、综合分析,推测判断及根据上下文推测词义等。

据此,作者通过总结归纳发现,仔细阅读考查的技能可分为理解主旨大意、重要事实和细节、隐含意义,判断作者的观点、态度及句意逻辑这五大类,对24套真题共计240道选择题进行统计,可以看出在4级大纲中要求的5个主要测试技能的大致分布,如下表所示:

主旨大意事实细节判断推论观点态度句意逻辑2016 6 15 17 16 6 2017 3 16 19 14 8 2018 6 20 19 13 2 2019 7 18 17 16 2总计 22 69 72 59 18

3 结论与启示

本研究从语篇输入与预期回答两个特征入手,结合《大学英语四级考试大纲》的说明,并运用“iTEST英语文本指难针”为辅助工具,对2016年-2019年48篇仔细阅读进行基于内容效度视角的语篇分析。文本类型、题材和长度均符合大纲要求,四级词汇覆盖率均在96%以上,文本难度差距不大。

对文本难度值进行具体分析发现,2017年6月、2018年12月和2019年12月的四级仔细阅读第一篇难度值较第二篇略大,其他整体而言第一篇仔细阅读难度值低于同一套试卷中的第二篇仔细阅读。

从考查技能角度分析,大纲要求的阅读技能都有不同程度的覆盖,但事实细节、判断推论、观点态度出现的比例相对来说更高,考查不够均衡。

本研究对近四年的大学英语四级仔细阅读语篇进行分析,其结果对学生备考、教师教学及命题人员编写试题都具有一定的参考价值。但本研究只是以内容效度为视角,进行分析和总结,对考试的信度及效度其他层面的分析没有进行深入探讨。此外,文本难度分析结果主要依据“iTEST英语文本指难针”,分析的数据结果可能存在少量误差。

猜你喜欢

仔细阅读内容效度大纲
50个重要的知识点 一份“学习大纲”帮您梳理党的二十大报告
爸爸使用说明书
COSMIN方法介绍:评价患者报告结局测量工具内容效度的评分系统
英语专八阅读理解部分内容效度的历时对比研究(2009—2017年)
大学英语四六级仔细阅读题型应试技巧浅析
紧贴实战落实《大纲》要求推进航空体育训练创新发展
The Twins
人民军队第一部政治工作大纲
我军最早的政治工作大纲——党代表工作大纲