计算机自适应语言测试模型设计与效度验证
上QQ阅读APP看书,第一时间看更新

1.2 研究目的

基于以上的文献综述,我们设定了本研究的两个目的:第一,建立一个用于计算机自适应语言测试的听力和阅读试题库,并设计开发一个计算机自适应语言能力测试系统。具体而言,本部分包括四个方面:首先,采用二级计分项目反应理论模型对题组测试中的局部独立性假设进行验证,并采用多级计分项目反应理论模型解决题组测试中局部独立性假设被违反的问题;其次,采用探索性因子分析方法与验证性因子分析方法对单维性假设进行验证,从而确定听力试题库与阅读试题库中的项目的校准方法,即一起校准或是单独校准;再次,采用项目反应理论双参数模型对二级计分项目进行分析,用等级反应模型及广义分部评分模型对多级计分项目进行分析,并根据模型与整体数据及项目层次数据的拟合情况选择最佳模型,对项目进行参数估计;最后,同时使用项目反应理论似然比检验法与同时性项目偏差估计法对项目进行性别项目功能差异检验,并在此基础上对存在性别上的项目功能差异的项目进行内容分析,以确定该项目是否需要从题库中剔除。第二,采用“测试使用论证”(assessment use argument,简称AUA)框架对该计算机自适应语言测试模型进行效度验证。具体而言,本部分包括三个方面:首先,采用验证性因子分析方法探讨计算机自适应语言测试与计算机辅助语言测试在多大程度上考查相同的构念,为计算机自适应语言测试的构念效度提供初步依据;其次,采用结构方程模型分析方法探讨计算机熟悉度在多大程度上影响计算机自适应语言测试所考查的构念,为计算机自适应语言测试的构念效度和概推性提供依据;最后,采用多群组结构方程模型分析方法探讨计算机自适应语言测试因子结构在多大程度上能在男女考生群组中保持一致性,为计算机自适应语言测试的公平性提供依据。