-
数据介绍
本研究由ACT与密西西比社区学院委员会(MCCB)合作进行,分析MCCB Smart Start课程学生的数据,包括WorkKeys分数、TABE测试成绩、高等教育GPA、证书完成情况及高中同等学力认证信息。数据集包含57%的女性和43%的男性,多数为白人(57%),另有38%的非裔美国学生和4%的西班牙裔学生。样本因数据缺失(如部分学生未参加TABE测试)而大小不一。
-
分析方法
研究考察三种效度类型:(1)收敛效度(WorkKeys与TABE的相关性),(2)区分效度(WorkKeys各评估与TABE不同部分的关系),以及(3)准则相关效度(WorkKeys与教育成果如高中同等学力、GPA的关系)。分析主要使用相关系数和逻辑回归。
-
收敛效度与区分效度
- WorkKeys与TABE(语言、阅读、数学)均呈正相关,支持收敛效度(表1)。
- WorkKeys应用数学与TABE数学相关性较高,而工作场所文档与TABE语言、阅读相关性更强,但与数学相关性较弱,仅支持部分区分效度。
-
准则相关效度
- 高中同等学力:WorkKeys、NCRC与高中同等学力获得率显著正相关(表3)。NCRC水平越高,获得高中同等学力的比例越高(图1),获得NCRC者获得高中同等学力的概率是无者的三倍(χ²(1) = 84.93, p < .01)。
- GPA:WorkKeys与GPA呈正相关(表4),NCRC水平越高,平均GPA越高(图2)。但样本存在范围限制(低分者可能未继续教育),与阿肯色州研究(r = 0.41)差异可能源于此。
-
证书完成情况
证书完成率低(约6%),且因数据缺失无法确认部分学生是否确实未获得证书。分析显示NCRC水平与证书完成率呈阶梯状趋势,但差异不显著(χ²(4) = 2.78, p = n.s.)(图3)。
-
研究结论
- WorkKeys有效性证据较强,尤其在预测高中同等学力完成率和GPA方面。WorkKeys与TABE在预测高中同等学力方面能力相似。
- 区分效度仅部分支持(工作场所文档),未来研究需使用非认知量表验证。
- 证书完成率分析受数据限制,未来研究应扩大样本并区分不同证书类型。
-
未来研究方向
- 使用非认知量表验证WorkKeys的区分效度。
- 进行更大样本的GPA研究以确定群体关系。
- 优化证书完成率分析,区分不同证书与WorkKeys评估的关联。