国内语言测试构念效度验证探究近十年来发展

《国内语言测试构念效度验证探究近十年来发展》由会员上传分享，免费在线阅读，更多相关内容在工程资料-天天文库。

1、国内语言测试构念效度验证探究近十年来发展摘要：近十年来，构念效度验证理论和实践在我国有较大发展，如量化构念效化验证和质性构念效化验证研究等。就语言测试领域最新发展情况看，国内研究在构念效度验证方面还存在很多不足，有待测试研究人员进一步论证和发展。关键词：构念效度验证；因子分析；口陈报告一、构念效度验证理论在语言测试中，专业化和效度研究是现在和未来研究的两个重点领域(Bachman,2000)o构念效度研究又处于效度研究的核心地位。构念是测验所要测量的概念或特性。构念效度是测验代表语言学习基本理论程度的指标。构念效度验证研

2、究测试所测量的能力，为测试提供理论基础。构念效度证据的来源包括考试内容、反应过程、内部结构、与其他变量之间关系和测验影响，这反映了从多种渠道积累效度证据的重要性。效度证据的不断积累有益于使用和解释分数、完善测验构念和测验本身、提出新的研究问题。精心编制的测验、命题的理论框架、测验的实施和计分过程、分数等值、及时纠正测验过程中的不公平因素等是构念效度得以实现的根本保证。但是，作为构念效度验证基础的构念难以确定(Chapelieetal.,2010),收集的各种证据也没有连续性，基于论证的效度验证模式(Bachman,201

3、0)应运而生。在该模式中，测试的发展形成了一个推论链，每一个论证会形成下一个论证的出发点，第二个论点会成为第三个论点的出发点，每个论点都要有条件支撑，最后效度验证研究人员得出效度验证的结论。在这个连续统一体中，每一部分都需要收集多种证据，而每一种证据，都会对构念效度产生影响,各种证据成为了一个整体中的部分。二、国内的构念效度验证实践1.量化的构念效度验证研究量化的构念效度研究主要运用结构方程模型、因子分析、多质多法分析、问卷等工具进行。其中因子分析包括探索性因子分析和验证性因子分析。结构方程模型能够帮助测量构念的解释力。

4、例如，为计算机自动评分的前期人工评分提供较为精确的“作文内容”分项指标及其评定标准，文秋芳(2007)运用结构方程模型检验了限时英语议论文"内容”的构念效度。她发现，代表'‘内容”构念的四个观测变量：文章切题性、观点明确性、说理透彻性与篇章连贯性能够解释作文质量56%的差异。运用同样的过程，高霄(2009)发现，由同样四项指标反映的“写作内容”能够直接解释“写作质量”成绩变异的46.2%；由流利性、准确性与复杂性反映的"写作形式”能够直接解释“写作质量”成绩变异的39.7%,总和为85.9%,说明“写作内容”与“写作形式

5、”能够有效预测“写作质量”，这证实了该研究所提出的"写作质量”构念效度比较好。研究结果对二语写作评估标准的改进具有一定的启发意义。验证性因子分析是在已知测试的理论假设的因子构成的情况下，来分析数据是否与理论假设的因子结构拟合。例如，邹申等研究者（2009）发现，英语专业八级试题中二阶单因子模型的拟合数据可以用于解释人文知识项目的构念以及内部各因子间关系：社会文化知识、文学知识和语言学知识反映了人文知识构念；同时，三个因子之间的关联也较紧密。因子负荷值也说明这些题目对其相应的因子都有显著贡献。也就是说，题目成功测试了考试规

6、定的知识结构。多质多法分析旨在确定在多大程度上测试结果是考生的能力所致还是测试方法所致。陈慧麟（2009）通过英语国家概况测试的案例研究，使用多质多法验证了基于纸笔的测试和基于计算机的测试所考查的构念的对等性。结果表明，纯文字的纸笔测试和相应的纯文字的基于计算机的测试具有几乎相同的能力结构。探索性因子分析一般在未知所测构念因子结构的情况下探索实际数据的因子结构。刘国忠和秦晓晴（2010）随机抽取的英语专业四个年级320名学生的240篇限时作文，按15个指标评分后，将15个判断写作准确性的指标通过探索性因子分析缩减为12个

7、，然后提取了三个主因子，这三个主因子初始特征值都超过了1.0的可接受值，累计方差解释率达到了71.36%O因此，这12个变量有较好的结构效度。他们得出结论：二语写作的准确性是可测的。贺莉（2012）结合语言测试的构念效度对测试结果所体现出的性别差异现象进行研究，作者运用了探索性因子分析发现，该测试对于男生概念效度较好，而对女生来说构念效度较差，作者从“构念体现不足”和“构念无关因素”两个方面对原因进行了解释。采用多种问卷调查的方式可以调查在何种程度上考试考查了欲测的构念。基于构念整体观和建构主义对读写构念的描述，张新玲和

8、曾用强（2009）从构念效度入手对读写结合写作任务在广东省高考英语考试中所得分数进行效度验证，运用专家预测、教师备考过程调查和考生应考过程调查,分析考生对考试过程应答数据。发现所取样本考生的读写结合写作测试应答数据和构念理论拟合，相关证据能够较充分、适当地支持基于该考试分数的大学录取决策。2•质性构念效度验证研究针对