评估影响: Pre-K forPA Campaign 从八年的学习和见解基于国家的倡导倡议 评估人员的说明 本报告反映了由威廉·佩恩基金会资助的多年评估的综合。评估的主要目的是为Pre-KforPACampaig提供持续的学习和战略见解,这是一项旨在加强公众对宾夕法尼亚州Pre-K的支持的合作努力。该运动还得到了威廉·佩恩基金会的支持,以前的报告已与基金会和运动分享。 我们很高兴与更广泛的受众分享该运动的这些发现和见解,希望他们能告知其他从事大规模国家运动的资助者和倡导者。该报告捕获了从2014年竞选活动开始的旅程,并一直持续到今天。我们感谢在评估过程中与基金会和运动建立的卓越伙伴关系。 报告中表达的观点是作者的观点,不一定反映WilliamPenn基金会或Pre-KforPACampaign和/或其个人成员的观点。 Introduction 倡导是一个漫长的游戏。有效的倡导需要广泛和信任的关系,强大的财务支持,熟练的个人和组织,也许最重要的是,灵活地专注于新兴需求。建立这种基础设施可能需要时间,并不是所有的基金会都愿意在建立有效能力所需的时间范围内支持倡导运动。 但这是可以做到的。 2014年,TCC集团由WilliamPe基金会聘请,担任Pre-KforPACampaig的嵌入式评估员,该宣传活动由整个宾夕法尼亚州的成员组成,共同努力增加对高质量的访问和负担能力。该州的幼儿园计划。基金会和参与该运动的宣传组织对评估感兴趣,并出于以下几个原因选择了嵌入式方法。首先,它允许深入融入运动 。我们在场。 atmanyinternalmeetingsandcouldobserveandparticulateassumptionsandchangesinstrategies.Second,theamountoffacetimeallowedustobuildrelationshipwiththe 第四,有一种感觉是,内嵌的而不是外部的评估员可以帮助运动持续关注预期的结果。 嵌入式评估角色对竞选中的许多人来说是新的,随着时间的推移,它以微妙但重要的方式演变。在最初的几年里,这个角色意味着我们参与了大多数内部竞选会议的召开,作为观察员,专注于确定围绕角色的假设,调整和建立报告系统。我们通过对该运动领导人的调查和访谈进行了年度数据收集,重点是了解能力,信任和运作 。我们正在待命。 嵌入式评估: 我们与倡导者建立了密切合作,以建设他们的能力自我反省和评估并为实时学习和决策提供信息。 对于任何新出现的问题,倡导者在通过各种形式的战略转移和人员配备工作时都有。当成员们发现他们的大步时,我们的角色转变为积极的促进,帮助他们专注于定期反思和学习,着眼于战略和未来的支点。在我们的评估合作伙伴关系的最后三年中,该运动的工作人员自己掌握了实施的所有权。 许多评估和学习活动,如 然而,随着COVID-19的出现,我们的角色转向满足运动的紧急需求。 虽然我们详细观察了该运动的内部动态,但我们还实施了严格的方法,重点是了解进展和影响。Pre-KforPACampaig在一年内开始了其倡导工作,该州陷入僵局,新当选的州长汤姆·沃尔夫(TomWolf)自2009年以来首次未能按时通过州预算。从那里开始,政治风在一个政治分裂的国家中来回转移。不断变化的政治格局影响了竞选活动推进其倡导目标的方式,以及威廉·佩恩基金会评估目标可行性的方式,以及我们如何考虑收集有关其影响的数据的最佳方法。 本报告建立在与这项宣传活动合作八年的基础上。它旨在回答三个大问题: 1 3 2 运动对公共资金水平有什么影响? 在两极分化和不断变化的环境中,有效的宣传策略是什么?持续的金融支持可以允许什么宣传活动要实现吗? 我们希望这份报告将对所有参与宣传工作的人有所帮助和鼓舞,特别是那些致力于在两极分化的国家制定政策和制度变革的人,以及致力于为倡导者提供他们需要的长期和强大的资金来发挥作用。 1 大问题# 运动对公共资金水平有什么影响? 竞选成就 我们进行了由四部分组成的定量分析,以了解该运动对K前的州资助的影响。结果表明,Pre-KforPA 运动对宾夕法尼亚州K前计划的州资助产生了显着的积极影响。 四部分定量分析包括: 要映射的趋势分析国家的支出趋势。 pre-postanalysistodetecttheassociationbetweentheCampaign’spresenceandK前的资金水平。 对K-12教育支出 PAK前的资金趋势与 等因素的预算增长 没有类似状态的类似状 控制分析。 态的比较积极的K前运动。 有关方法的其他详细信息,请参见附录A。 趋势分析 自从Pre-KforPA运动于2014年开始倡导为Pre-K增加资金以来,宾夕法尼亚州一直在稳步增加新的国家在Pre-K计数(PKC)和先发补充援助计划(HSSAP)方面的支出。对国家在PKC和HSSAP上的支出的趋势分析表明,自2014-15年度以来,每个预算年度的支出每年至少增加2500万美 元,但2020-21年度除外,由于COVID-19大流行,这些项目的资金与上一年相同。然而,在2020-21年度,通过冠状病毒援助、救济和经济安全(CARES)法案,900万美元的可自由支配的联邦资金被分配给了Pre-K。总的来说,这代表了在八个预算周期内,国家在K前的支出增加了超过2.54亿美元。 图表11 2007-2023年宾夕法尼亚州PKC和HSSAP的总 支出(百万美元)2 Pre-KforPA成立于2014年 391 312 281282 252 223 193 163 115 124124 121 137 116 120 125 200720082009 2010201120122013201420152016 2017201820192020 2008 to 2009 to 2010 to 2011 to 2012 to totototototo to 20132014201520162017 2018 2019 to 2020 to 2021 to 20212022 toto 20222023 1假定竞选活动对国家预算的影响始于2015-16年预算。 2国家早期教育研究所自我报告的2009-10至2013-14年和2015-16至2020-21年的州支出数据。2014-15年和2021-22至2022 -23年的数据来自宾夕法尼亚州预算办公室发布的预算项目拨款。 Pre-PostAnalysis Apre-postanalysisassessingmeanspendingamountsbeforeandafterthebeginningoftheCampaigneffortswasconductedtoassessiftherewasanyassociationbetweencaignactivityandspendinglevels. Theaimoftheanalysiswastodeterminewhethertherewas 运动启动前后K前支出发生重大变化,但不能确定运动是否引起了变化。3运动前阶段包括2007-08至 2014-15年,而运动后阶段包括2015-16至2022-23年。分析表明,在竞选活动启动后,宾夕法尼亚州的K前总支出平均增加了1.395亿美元。具体来说,Pre-K的平均支出从竞选前的1.225亿美元增加到竞选后的2.62亿美元。 多元回归分析 进行了多元回归分析,以确定在2007-08年至2022-23年之间,K-12教育支出作为可能的混杂变量的影响,这可能会影响国家对K前计划的资助。分析表明,即使在控制了K-12支出之后,该运动仍继续对K前支出产生积极影响。虽然K-12支出对该州的K前支出有积极影响,但这一结果在统计上并不显著。 差异分析 尽管这三种分析相互补充,以提供该运动在改善国家K前支出方面的有效性的证据,但由于其倡导而产生的影响水平仍然存在不确定性。差异分析通过使用纵向数据比较接受干预(运动)的人群和未接受干预(比较状态)的人群之间随时间的结果变化,为因果影响提供了更有力的证据。用于此分析的回归模型将宾夕法尼亚州的K前支出与2009-10年至2020-21年之间的比较州(俄亥俄州)进行了比较。 Byusingacomparativestatethatsharesasimilarpre-Kpolicytow景butdidnothaveapublicvisiblecampaignlikePre-KforPA,theanalysispartiallyisolatestheimpactofthe 运动来自其他可能影响K前支出结果的潜在因素6. 3统计分析包括进行Welch双样本t检验(t=5.4894,p=0.00086)。 4该州对K-12(州生产总值%)数据的财政努力来自AlbertShanker研究所发布的学校财务指标数据库(SFID)。 51=110,963,235;p<0.01;R2=0.82(K12支出的β重量:10,308,588,926,无统计学意义)。 6有关如何选择控制状态的更多信息包括在附录A中。 保持州和年份固定效应不变,这项分析发现,PA运动的Pre-K的存在增加了宾夕法尼亚州的年度 Pre-K支出总额 平均$7040万美元。7这种“治疗效果”最接近在竞选活动的宣传工作与宾夕法尼亚州的K前支出增加之间建立因果关系。 该运动似乎已经成功地增加了宾夕法尼亚州K前的总支出,潜在的美元影响在7040万美元到 1.395亿美元(表1).8 表1.按分析类型划分的活动影响估计 71=70,394,609;p<0.001;R2=0.97。 8这种广泛的估计反映了本研究中包含的不同模型和分析的可变性和不精确性。 2 大问题# 在两极分化和不断变化的环境中,有效的宣传策略是什么? TheContext 2007年,宾夕法尼亚州的一项重大发展是由国家资助的Pre-KCounts计划的启动,这是一项针对符合收入条件的家庭的免费Pre-K计划。 然而,最初的州投资停滞不前,许多州在获得高质量的pre-K方面开始超过宾夕法尼亚州。倡导者动员起来倡导增加国家支持,这成为2014年启动Pre-KforPACampaign的催化剂。 许多人将K前法案描述为立法机构历史上的两党问题。在2014年竞选开始时,民主党候选人汤姆·沃尔夫与现任共和党人汤姆·科贝特竞选宾夕法尼亚州州长。作为候选人,沃尔夫已经公开表明了他对在该州扩大K前法案的承诺。2014年11月,沃尔夫击败了科贝特。 在同一次选举中,共和党人在州议会和参议院中占多数。这意味着宾夕法尼亚州的政治背景与其他几个州相似,这些州在竞选活动的大部分时间里都在立法会议和民主党州长中占多数(图1)。 200720082009201020112012201320142015 2016201720182019202020212022 图1.宾夕法尼亚州政府的政党控制 总督 D D D D R R R R D D D D D D D D 参议院 R R R R R R R R R R R R R R R R House D D R R R R R R R R R R R R R R 2018年11月,州长沃尔夫赢得连任。在同一次选举中,几位温和派共和党人失去了民主党候选人的席位 ,导致立法机关的分裂比往年更为平均,但鉴于以前的温和派共和党人不再任职,因此两极分化也更加严重。尽管立法机关变得更加两极分化,但前党继续得到两党的支持。 当沃尔夫州长在没有连任的情况下进入他的第二个任期时,拥护者乐观地认为他将在K前问题上雄心勃勃 。他提出了一个 增加了5,000万美元,鉴于人们希望采取更大胆的举措,例如推动普及K之前的行动,这一行动被认为是适度的。总体而言,如上所述,该运动在