ACT综合分数和高中成绩点数预测按时完成学位概率的有效性：考察大一学年成绩作为中介变量的研究

ACT综合分数和高中绩点在预测按时完成学位概率中有效性：考察大一学年绩点作为中介变量研究 莱利N洛里亚和埃德加桑切斯 Introduction 在过去几十年中，如ACT分数和高中绩点（HSGPA）等大学前学术指标已被证明是预测高等教育成功重要工具（RadunzelNoble2012a）。研究表明，使用ACT分数作为预测指标可以提高对各种早期高等教育学业结果（如第一学期GPA）以及长期结果（如学位完成率）预测准确性（Kobrinetal2008；MatternPatterson2013；RadunzelMattern2020）。Westrick等人（2021）研究发现，ACT综合分数（ACTC）和HSGPA都是第一年大学GPA强有力预测因子，而第一年大学GPA又是第2年和第3年继续攻读学位最佳预测因子。这些研究显示了ACTC分数与高等教育持续性强烈预测路径。在模型中包含ACTC分数与仅包含HSGPA模型相比，在预测大学成功方面表现更为出色（RadunzelNoble2012a）。 当然，其他预测因素对于形成学生能力完整图景也很重要。例如，Perera和DiGiacomo（2013）一项元分析发现，诸如情绪智力等特质可以预测学术表现，高水平这些特质始终能够预测更好学术表现。其他研究还发现，行为技能如动机和自我调节，以及行为技能前因如尽责性和情绪调节，也是有价值预测因素，良好行为能力预测更高学术成功概率（Camara等人 ，2015；Caspi和Shiner，2006；Poropat，2009；Robbins等人，2006）。无论其他预测因素 实用性如何，ACT分数一直被视为预测大学成功重要指标。ACT分数无意取代非认知因素预测作用。相反，这些分数反映了能使某人在大学中取得成功成就水平。 HSGPA是预测大学成功最可预测和常用标准之一。与ACTC分数不同，它是多维度成绩衡量标准，也受各种非认知因素影响。例如，在一项研究中，内在动机模型及其相关次级因素（如对学校兴趣、课堂乐趣）解释了大约33HSGPA方差（FroilandWorrell2016）。另一项由Steeadle和Way（2024）进行研究发现，各种非认知因素（包括社会情感等）也会影响HSGPA。 技能、人口统计类别以及高中之间差异（如人口统计构成）等因素对高学校业平均成绩（HSGPA）预测作用显著超越了认知因素（包括ACT分数）。尽管这些发现表明HSGPA可能在预测模型中解释更多变异度（Allensworth和Clark，2020），但难以确切确定HSGPA所代表具体潜在特质。 精确性在开发公平且一致成功模型中至关重要。新冠肺炎疫情后相关研究（Sanchez2024）表明，在2017年至2021年间，高中平均绩点（HSGPA）在预测有效性方面经历了显著变化，而ACTC分数则相对稳定，这进一步突显了精确性和一致性在解释中重要性。该研究还发现，同时使用HSGPA和ACTC分数比单独使用其中任何一个都能提供更好预测准确性。另一项研究（Sawyer2010）指出，虽然HSGPA在最选择性录取决策中更为有用，但ACT和SAT分数对于高度选择性机构来说更为重要。这两项研究都证明了两种成就指标之间互补性。考虑到逐步效度原则（Smith等，2003），该原则一般建议为单一潜在构念开发测量工具以保持精确性，ACTC分数作为预测工具对于聚焦认知能力这一潜在变量至关重要。进一步探讨ACT分数如何有效预测大学学位完成率机制，有助于教育研究人员更好地回应日益严格 审查和透明度要求（Adnett等，2011）。 由于一些审查，在过去几年中，尤其是在COVID19爆发之后，越来越多大学开始将其学生申请中ACT和SAT成绩作为可选要求（SchultzBackstrom2021）。一些研究人员和教育工作者，如Koljatic等人（2021），质疑像ACT这样标准化测试在预测学生成功和减少录取偏见方面效用。尽管有关高风险评估中存在偏见担忧，许多人仍然认为并提供了证据表明，与高中平均成绩（HSGPA）或学生面试等指标相比，标准化考试如ACT不易受到偏见和群体差异影响（Alvero等人，2021；Briggs2021；Otugo等人，2021；SteedleWay2024）。几乎没有证据表明，对于像ACT和SAT这样标准化测试，不同群体间项目功能存在差异（SantelicesWilson2012）。虽然大学可能认为重视个人陈述或推荐信等指标会使其选择更加公正，但这些指标实际上比分数更容易受到人类偏见影响（Murphy等人，2009；Woo等人，2023）。事实上，一些研究表明，当使用标准化测验时，可以通过录取决定更好地纠正和调整由系统性问题（如学校资金不足）导致成绩差异（Woo等人，2023）。像ACT这样测量工具仍然是确保录取决策公平、减少偏见和人为错误关键工具。对类似ACT评估增量有效性和功效研究有助于提高高等教育模型预测学生成功有效性。 在过去研究中，关于预科学术成就测量有效性研究大多关注了这些测量与大学一年级GPA（FYGPA）之间关系作为大学成功结果（例如，AllenRadunzel2017）。先前工作表明，ACT分数可以预测FYGPA（HuhHuang2016）。然而，随着高等教育机构发展， 面对对学生长期表现越来越高人账期望，仅依靠FYGPA可能不足以全面衡量大学阶段学术成功。 在当前教育环境中，高等教育机构面临更大压力，需要更好地理解并预测学生长期学术成就 ，并为那些有退学或未能毕业风险学生提供适当帮助。因此，近期研究工作已扩展到更多关注长期大学成功指标，如累计GPA和按时完成学位，以及这些结果有效预测因素。例如，ACT考试成绩和高中平均成绩（HSGPA）可以预测毕业时累计大学GPA，并且能够预测四年制院校在6年内和两年制院校在4年内完成学位概率（ACT2013；RadunzelandNoble2012a ）。其他研究发现，达到ACT大学预备标准会增加某人继续就读大学并在规定时间内完成学位可能性（RadunzelNoble2012b）。通过将研究范围扩展到早期大学成功之外，研究人员可以更好地检验ACT在长期学术乃至职业生涯成功方面预测有效性。 尽管有证据表明ACT分数是预测大学预备年级平均绩点（FYGPA）和学位完成率有效指标，但很少有研究探讨FYGPA如何部分中学位完成率与预科学术预测因素（如ACT成绩）之间关系。虽然一些模型已经在预测长期大学成功时包含了FYGPA，但这些变量之间路径仍然缺乏探索。理解这些因素如何相互作用以产生不同结果对于提高模型预测能力至关重要。在大学早期表现不佳，例如FYGPA较低，可能表明准备不足以及缺乏必要基础知识，这可能导致诸如奖学金资金减少或继续修读更高级课程可能性降低等问题。这些问题可能会累积并使人更不可能完成学位（Schreiner等，2020）。 在本研究中，我们扩展了先前研究，这些研究主要集中在评估ACT分数作为预测早期大学成果 （如首年平均GPA）价值，转而考察ACTC分数预测后期大学成果（如第4年和第6年完成学位）能力。我们分析了一个合理预测链，在这个链中，我们预期高中平均GPA和ACTC分数能够预测首年平均GPA，而首年平均GPA又将预测第4年和第6年毕业可能性。通过研究这一过程，我们旨在增强高等教育机构预测毕业成功能力。 开展路径分析以更好地理解ACT分数对未来高等教育学业完成预测有效性与其早期表现之间关系，有助于研究人员更深入地了解早期表现与长期表现之间联系。路径分析使用结构方程建模来解析预测因子和结果之间直接和间接关系。路径分析可以帮助确定ACTC分数和HSGPA共同对学位完成概率影响是否部分可以通过这些指标与FYGPA关系来解释和中。通过了解这一过程，高中和高等教育专业人士可以更好地识别潜在风险学生。为了更深入地理解HSGPA、ACTC分数、FYGPA与学位完成结果之间路径关系，我们有两个主要研究问题。 1FYGPA是否中了HSGPA和ACTC分数对学生在第4年或第6年完成学士学位概率影响？ 2在考虑FYGPA因素后，ACTC分数和HSGPA共同在预测第4年和第6年完成学位概率中扮演什么角色？ Methods 样品特征 我们样本包括2017年秋季进入一个美国州四年制公立高等教育机构学生，共涉及32所院校。由于该州实施了校内测试项目，几乎所有公立高中毕业生都参加了ACT考试。仅包含具有有效ACT成绩、高中平均GPAHSGPA、第一学年平均GPAFYGPA、人口统计特征以及四年和六年学位获得状态记录学生。 措施 ACT综合评分 ACT综合分数来自官方测试记录。如果学生有多次分数记录，则在其毕业前使用最近一次分数。这些分数要么来自州内在校测试管理，要么来自国家级测试管理。 累积高中GPAHSGPA 在ACT注册过程中，学生告了他们在数学、英语、科学和社会研究等核心领域最多可达23门课程成绩，成绩等级范围为00至40。我们将每位学生成绩平均，计算出他们HSGPA（高中加权平均成绩）。缺少HSGPA数据学生排除在分析之外。每位学生自我告成绩数量可能有所不同，但最多可达23门课程。前期研究表明，自我告HSGPA可以作为高中成就准确衡量标准；自我告成绩与正式成绩单上GPA高度相关（SanchezBuddin2016）。 大学一年级GPAFYGPA FYGPA直接从正式中学后成绩单中获得。 学士学位完成 本科学位完成直接从官方高等教育学校成绩单中获得。学位完成情况测量为两个时间点上二元变量。那些在开始高等教育学校4年内成功获得学位人分配到二元第4年结果变量为1，而那些未能在4年内获得学位人则分配为0。 学位获得情况赋值为0。同样，到第六年时已完成学位学生赋值为1，而未完成学位学生赋值为0。 人口统计变量 在ACT考试注册时收集了三个人口统计变量：性别、种族Ethnicity和家庭收入。性别由学生告为男性或女性（“另一种性别”选项现在包括在ACT人口统计数据中，但在本组告数据时并未提供）。学生从以下选项中选择他们种族族裔身份：亚裔、黑人、西班牙裔、美洲原住民阿拉斯加原住民、夏威夷原住民太平洋岛民、白人、两个或多个种族，或选择不回答。所有 人口统计信息均以描述性表格形式提供。由于总体群体数量较少，美洲原住民阿拉斯加原住民、夏威夷原住民太平洋岛民和两个或多个种族类别在分析时合并。自家庭收入分为四组：低于36000美元、36000美元至60000美元、60000美元至100000美元以及超过100000美元。我们还包含了一个收入缺失响应类别，因为有较大比例收入数据缺失（12）。 数据与分析 在本项目中，数据进行了聚类处理，学生按照他们最初就读高等教育机构（即他们第一所四年制高等教育机构）进行嵌套。在总共19515名学生中，我们包括了30个机构集群。每所机构学生人数从98人到4532人不等。由于每所高等教育机构独特特性（例如，选择性、可用资金水平以及学生群体），我们预计这些组别将占到四年和六年完成学位差异重要部分。事实上 ，四年时毕业可能性校内相关系数为014，六年时毕业可能性校内相关系数为016。通 过使用聚类稳健标准误进行路径分析，或通过分层逻辑回归模型，已经考虑到了观察值聚类情况。 我们使用标准化高中平均成绩（HSGPA）、ACTC分数和学年平均成绩（FYGPA）作为所有模型中标准变量，并在本文中告了四种模型。首先，我们使用结构方程模型来测试高中平均成绩和ACTC分数对学生成为四年级之前完成学位概率影响是否通过学年平均成绩中。为了考虑机构内嵌套效应，我们使用了R中Laavan包聚类功能。我们还生成了一个具有相同预测变量和结构但以学生成为六年级之前完成学位概率为目标结果第二个模型，并同样按机构进行聚类。 我们还告了两个分层逻辑模型，用于预测第4年和第6年完成学位概率。这些模型包括累计学分绩点（HSGPA）、ACTC分数、HSGPA与ACTC分数交互作用、首年平均学分绩