多层面Rasch模型分析写作测试中评卷者的偏差性*
2011-10-29贺满足
外语与翻译 2011年1期
贺满足
(湖南第一师范学院外语系,湖南 长沙 410205)
多层面Rasch模型分析写作测试中评卷者的偏差性*
贺满足
(湖南第一师范学院外语系,湖南 长沙 410205)
运用多层面Rasch模型探讨写作测试中评卷者的评分一致性、严厉程度及与考生的交互作用。发现评卷者在评分过程中严厉程度一致,但评卷者之间有显著差别;评卷者与某些考生之间存在显著的交互作用,但偏差情况各不相同,且交互作用模型也不明确。由此可以看出,评分者是写作测试中的一个重要变量,在高风险的考试中,评分者必须接受严格的培训并且认真参与试评,以便最大程度地保证考试的公平性。
多层面Rasch模型;写作测试;评分者;偏差性
现在的英语写作考试主要采用主观题型,要求考生根据要求完成一定的综合性任务以显示其所学的知识或技能,因而一些专家将其称之为做事测试。Brown&Hudson认为,基于做事的测试可以采取多种方法,如写作、访谈等。做事测试对心理测量学家、试卷设计者、研究者提出了挑战,要求他们设计出一些情景,从中得到一些证据,以此推断学生的语言能力。做事测试为产出型能力测试,涉及试题(任务),考生的表现、考生的能力和个人特点,评分量表、测试的能力、评卷者等。这些层面的关系可以用图1所示的模型来表示。

图1 做事测试模型
Rasch模型是一种单参数项目反应理论模型,用来分析多项选择题中试题的难度和考生的能力。多层面Rasch模型则是一种延伸,用来分析主观试题。……
登录APP查看全文
