COVID - 19 大流行后高中平均分和 ACT 综合得分预测有效性的变化

高中平均分和ACT预测效度的变化®COVID-19大流行后的综合评分 EDGARI.SANCHEZ，博士 2024年9月 Conclusions 本研究考察了高中平均分和ACT的预测效度®2020年新冠肺炎疫情暴发前后第一学年大学平均学分绩点的综合评分。研究发现，高中平均学分绩点的预测能力在2020年后发生了显著变化，表明受疫情影响后入学的学生可能因为较低的预期第一学年平均学分绩点而准备不足。相比之下，ACT综合评分相对稳定，因此继续成为预测学生早期大学成功的一个可靠指标。该研究强调了同时使用高中平均学分绩点和ACT综合评分的补偿性质，强调了获得准确预测时考虑多种衡量标准的重要性。 那又怎样？ 因为这些研究揭示了预测大学一年级成绩的能力，因此对于学生和高校都具有重要意义：对于学生而言，了解高中平均GPA和ACT综合分数如何预测大学一年级的平均GPA可以帮助他们有效准备，并在需要时寻求适当的支持，从而确保更顺利地过渡到大学。对于高校而言，这些发现表明，在没有其他衡量成就的替代指标的情况下仅使用高中平均GPA可能会导致他们无法识别可能需要额外支持的学生。高中平均GPA和ACT综合分数的预测有效性变化表明，同时使用这两种指标将提供评估学生在大学一年级课程中成功机会所需的重要信息。 现在呢? 这些发现为设计针对学生需求的支持系统提供了宝贵的指导，从而提高学生的留存率和整体成果。此外，研究对招生政策的影响使学院能够做出更加明智的决策，确保录取的学生能够应对高等教育的要求，最终促进一个积极且成功的学习环境。这些发现表明，学院应该鼓励学生提交他们的ACT成绩，以便学院能够更好地评估学生在第一年的潜在成功，并为需要帮助的学生提供必要的支持。 关于作者 埃德加·桑切斯博士 桑切斯博士是ACT公司的首席研究科学家，他的研究领域包括高等教育入学、国家测试项目、考试准备效果以及干预措施的有效性。在他的职业生涯中，桑切斯博士一直专注于高中与大学之间的过渡研究，并支持高校管理人员、学生及其家庭的决策能力。他的研究成果在学术文献和媒体中得到了广泛引用，包括华尔街日报,华盛顿邮报,今日美国，以及教育贸易出版社。 Acknowledgements 作者要感谢TyCruce，JeffSchiel和XinLi对本报告先前草案的评论。 Introduction 研究人员预测，美国在未来十年将需要一个更加受过高等教育的劳动力。根据美国劳工统计局（U.S.BureauofLaborStatistics，2023）的数据，在入门级工人中，通常需要高中文凭的工作数量预计将在2022年至2032年间仅增加0.9%。相比之下，需要学士学位的工作数量预计将增加6.7%，而需要硕士学位的工作数量预计将增加11.3%，需要博士学位或专业学位的工作数量预计将增加7.0%。尽管这些统计数据突显了高中学生进入大学并完成其学位项目的重要性，但大学入学人数显著下降。从2017年到2021年，大学入学人数减少了9.0%，从1990万降至1820万（NationalStudentClearinghouseResearchCenter，2023）。在此期间，适龄大学生（即18至24岁）的人口数量实际上增加了2.2%，从3050万增加到3120万（KidsCountDataCenter，2023）。 大学早期的成功，通过新生第一学年平均GPA（FYGPA）等指标来衡量，等同于成功且及时地完成学位（Demeteretal.,2022；Gershenfeldetal.,2016）。预测新生第一学年平均GPA的能力对于帮助识别可能面临学术困难的学生至关重要，从而使学院能够为他们提供更多学术支持。高中GPA（HSGPA）和标准化考试（如ACT）的成绩也起到类似的作用。®或者SAT成绩被发现能够预测大一学年平均成绩（FYGPA）（Marini等人 ，2019；Beard&Marini，2018；Curabay，2016；Westrick等人，2015；Warren&Goins，2019）。研究还发现，将考试成绩与高中平均成绩（HSGPA）结合起来考虑，比单独使用其中任何一项指标更能准确预测FYGPA（Sanchez，2013）。 尽管研究表明在预测学年平均成绩（FYGPA）的模型中同时包含高中累积平均成绩（HSGPA）和考试分数是有价值的，但高中成绩膨胀可能会影响HSGPA与FYGPA之间的关系，从而影响FYGPA的预测。Sanchez和Moore（2022）以及Sanchez（2023）的研究表明，高中成绩膨胀是一个持久且系统性的问题，普遍存在于各个教室、学区和州。这两项研究还指出，在2020年新冠疫情爆发后，高中成绩膨胀现象尤为明显，显示了在疫情后的几年里，高中成绩膨胀的程度超过了过去十年。由于成绩旨在反映学生的学术知识和技能，并且通常也反映了学生为大学和职业生涯所做的准备情况，因此确保成绩准确至关重要。学生们努力争取获得尽可能高的成绩，以便他们的HSGPA——一个综合衡量学生所知和所能的累计指标——使他们有资格进入下一门课程并最终获得高中毕业证书。成绩膨胀威胁到HSGPA的可靠性。 此外，随着许多学院和大学将标准化考试成绩列为可选项目，高中平均成绩（HSGPA）在支持高校录取决策中✁作用变得更加重要。总体而言，四年制学院要求最低✁HSGPA以确保学生能够入学，而社区学院则利用HSGPA进行课程安置。除了用于录取和课程安置之外，高中成绩还可能帮助机构确定学生是否符合某些奖学金 ✁申请资格。高中成绩膨胀引发了我们如何解读成绩来衡量学术成就或预测高等教育成绩✁有效性✁质疑。 鉴于疫情前存在高中年级成绩膨胀✁证据，以及疫情后这一现象加速✁证据，值得重新审视高中学分平均成绩 （HSGPA）和ACT综合分数对大学第一年学分平均成绩（FYGPA）预测有效性✁影响。本研究旨在记录在疫情前后，HSGPA和ACT综合分数与FYGPA之间✁关系如何变化。本研究重点关注以下研究问题： 在2020年新冠疫情爆发前后，FYGPA与HSGPA之间✁关系、FYGPA与ACT综合分数之间✁关系，以及所有这三个指标✁结合关系是否发生了变化？ Methods 分析样品 本研究✁分析样本包括与ACT签订合同，在该州测试所有公立高中11年级学生✁ACT考试学生。在这种如全州采用合同✁情况下，几乎所有✁公立高中毕业生都参加了ACT考试。本研究仅限于2017年至2021年期间参加ACT考试并在高中毕业后当年秋季入学该州公立四年制学院✁高中毕业生。此后，这些群体按其大学第一学年秋季对应✁日历年进行引用（即2017年至2021年）。分析样本包括来自10个机构✁40,194名学生。这些学生代表了该州在这几年内所有参加ACT考试✁毕业生✁24%，参加高中毕业后当年秋季入学学院✁ACT考试毕业生✁47%，以及参加任何四年制学院秋季入学✁ACT考试毕业生✁67%。 措施 ACT复合材料 在分析中，官方ACT综合分数是从该州毕业生记录中获得✁。这个ACT综合分数可能是通过全省测试或国家测试管理期间获得✁。对于研究中多次参加ACT考试✁学生，使用他们高中毕业前✁最高分数。 累积高中GPA 自报告✁英语、数学、社会研究和自然科学课程成绩平均值被用于计算每位学生✁累计HSGPA。桑切斯和布丁（2016）✁研究表明，学生自报告✁HSGPA与成绩单上✁GPA高度相关，而其他研究表明使用自报告数据进行研究是合适✁（卡马拉等，2003；克恩塞尔等，2005；肖和马特恩，2009）。 大学一年级GPA 学生在校期间✁官方FYGP数据来自学生高中毕业后立即入学✁院校✁学生成绩单。 数据分析 在本研究中，学生嵌套在后继高等教育机构中。研究数据✁校内相关系数（ICC）为0.042。尽管这一ICC表明FYGPA✁变异性中很少有部分是由于不同机构之间✁差异所致，但仍然使用分层线性模型（HLMs）来分别和共同作为FYGPA连续测量值来检验HSGPA和ACT综合分数✁预测有效性。这种方法是因为它可以正确建模数据结构并考虑潜在独立性假设✁违反。估计了三个单独✁HLMs模型。在这三个模型中，FYGPA都是研究关注✁结果，而预测因子分别是年级、HSGPA或ACT综合分数，或者同时包括HSGPA和ACT综合分数。在这些模型中，并未考虑学院级别✁特征。为了评估模型拟合度，使用了赤池信息准则（AIC）和贝叶斯信息准则（BIC） 。1进行了考察。此外，残差方差✁减少（即校内方差）被用于评估模型拟合度。在当前分析中，首先拟合了一个空模型以评估由高等教育机构嵌套无法解释✁残差方差量。这代表了未被机构嵌套解释✁FYGPA差异。在后续模型中，评估了这一残差方差减少✁百分比，这可以解释为HSGPA、ACT综合分数以及结合模型解释✁残差方差百分比。 层级模型包括随机截距项。在考虑是否允许模型中存在随机斜率时，发现当检查ACT综合分数时，包含随机斜率和截距✁模型比仅包含随机截距✁模型拟合效果更好，但当检查HSGPA时并非如此。因此，并且考虑到低✁intraclasscorrelation（ICC），决定不包含随机斜率项，以便在所有检查✁模型中提供一个更为简洁✁模型。 1伪R2是因为没有一致✁方法来计算这些值，因此在层次模型中未进行计算。 Results 描述性统计 如所示表1研究样本中✁年级平均ACT复合分数从2020级入校生略微下降到2021级入校生，而平均高中绩点（HSGPA）则从2017级入校生略微上升到2021级入校生。从2017年至2019年，入学年级✁平均学年绩点（FYGPA）稳步上升，但在2019年至2020年间大幅下降，随后在2020年至2021年间有所回升。此外 ，在2017级和2021级之间，研究中✁10所院校✁学生人数减少了近17%。 图1展示了历年数据中，高中绩点平均分（HSGPA ）高度集中在较高分数段，超过60%✁学生获得了3.5或更高✁HSGPA。 图2显示，在不同✁年份中，ACT综合得分在21分左右大致呈正态分布。图3表明，多年来，FYGPA高度偏向其规模✁上端，平均值约为2.8。 表1.成就措施✁描述性统计 Characteristics 中学后队列 2017 2018 2019 2020 2021 ACT综合评分(平均值) 22.34 22.51 22.47 22.27 21.9 HSGPA(平均) 3.44 3.48 3.51 3.56 3.59 FYGPA(平均) 2.81 2.86 2.92 2.78 2.84 学生人数 8,738 8,598 7,810 7,764 7,284 图1.HSGPA✁直方图 20.78 17.02 14.30 11.90 3.89 5.53 0.000.000.010.000.010.030.15 0.32 1.12 1.83 25 20 百分比 15 10 5 0 23.11 00.250.500.751.001.251.501.752.002.252.502.753.003.253.503.754.00 HSGPA 图2.ACT综合得分✁直方图 7.72 8.04 8.23 7.69 7.29 6.69 6.00 5.30 4.28 3.75 3.01 2.55 1.78 2.15 1.37 0.75 0.36 0.09 10 0.02 0.13 0.54 1.26 2.02 3.28 4.37 5.32 6.02 8 百分比 6 4 2 0 1011 12131415 1617 181920 2122 232425 262728 2930 3132 3334 3536 ACT综合评分 ~ Note.未显示所有分数:分数1-8=0;分数9±0.005。 ~ 图3.FYGPA✁直方图 16 11.7712.37 11.76 7.36 8.02 4.92 5.66 6.41 3.11 3.36 1.08 1.421