概化理论在口语考试设计中的应用研究.pdf

《概化理论在口语考试设计中的应用研究.pdf》由会员上传分享，免费在线阅读，更多相关内容在行业资料-天天文库。

1、2011年11月外语教学Nov．2011第32卷第6期ForeignLanguageEducationVol．32No．6概化理论在口语考试设计中的应用研究孙海洋，韩宝成(中国科学院研究生院北京100049;北京外国语大学外国语言研究所北京100089)摘要:本研究将概化理论应用于一项针对职前中学英语教师的口语考试设计中，对这项考试的试测数据进行了概化和多元概化分析，确定了成绩误差的来源，分析了不同考试设计模式的信度，研究结果对口语考试任务的选取、合成总分的方法、评分员人数的确定和评分任务的分配，以及评分模式和方法的选择等具有重要的参考意义。关键词:一元概化理论;多元概化;

2、职前中学英语教师口语考试中图分类号:H319文献标识码:A文章编号:1000-5544(2011)06-0061-06Abstract:ThisstudyappliesGeneralizabilitytheoryintothedesignofaspeakingtestforpre-servicesecondaryschoolEnglishteachersandinvestigatesthetrialtestresultsbyusingGENOVAandmGENOVA．Byidentifyingthesourcesoftheerrors，thestudyanalyzesthe

3、reliabilitiesofdifferentdesigns．Theresultsaresignificantinselectingtesttasksandratingmethods，givingcompositescores，selectingratersandallocatingratingtasksamongratersinspeakingtests．Keywords:UnivariateGeneralizabilityTheory;MultivariateGeneralizabilityTheory;aspeakingtestforpre-servicesecon

4、daryschoolEnglishteachers1．引言3．文献回顾概化理论(GeneralizabilityTheory)是一种把测量误概化理论是Cronbach等人在20世纪70年代提出差作为模型参数来处理的测量理论(杨志明、张雷的一种心理计量理论，后经Brennan(2001)等人发展完2003)。它根据不同的误差来源对测量分数进行具体分善，现已成为与经典测验理论和项目反应理论并驾齐驱解，采用方差分析的方法，深入考察误差来源对测量信的三大测量理论之一。概化理论不仅保留了经典测验度的影响程度。在此基础上，可以帮助人们针对具体误理论中控制误差的方法，而且发展出了把误差控

5、制与决差来源，提出有效控制和改善测量精度的措施和方法。策需要或测量结果的概括程度相结合的理论和方法，为本研究将概化理论应用于一项针对职前中学英语教师研究标准化和标准化程度不高的测试开辟了新思路。的口语考试设计过程中，对这项考试的试测数据进行了概化理论分为一元概化理论和多元概化理论(杨志明、概化和多元概化分析，为改进和完善这项考试提供了重张雷2003)。简单来讲，一元概化将所有的测试项目作要的信息。为一个侧面计算其测量误差，而对于由多个相关联的潜在能力因子组成的测试，则需要运用多元概化计算其每2．研究背景个组成部分的误差。因此，多元概化分析能够发现一些英语教师是课堂输入的主要

6、提供者，是规范英语的整体信度较高而其中某一部分信度不够理想的测试的示范者和课堂教学的组织者与管理者，其口语能力对有问题，为实际考试设计提供更有价值的信息。效的英语教学起着至关重要的作用。《全日制义务教育概化理论诞生之初并未得到迅速推广，直到20世英语课程标准》(2001)对中小学阶段英语教学的课程目纪80年代后期才逐步发展起来，应用范围越来越广，涉标和内容标准提出了详细的要求，课程标准的实施对中及到心理测量、语言测试、绩效评估、医学测量等多个领小学英语教师的口语能力提出了更高的要求。为了更域(Brown＆Bailey1984;Brennan1980，2001;Shavels

7、on好地保证中学英语教师的质量，学校和教育机构在聘任＆Webb1991;Lee2005;Sawaki2007;Gebril2009;等)。新教师时应对教师候选人的英语口语能力作出严格要在我国概化理论主要用于高考、标准参照性测验、心理求。然而，目前国内还没有一项专门针对职前中学英语测量、普通话测试、教学评价、评分员一致性等研究中教师的口语考试，学校在招聘教师时没有统一可靠的参(刘远我、张厚粲1998;张雷等2001;杨志明等2004;徐考标准。因此，探索职前中学英语教师口语考试的研究建平2004;等)，在语言测试尤其