爱尔兰儿童和青年政策及结果的监测和评估 爱尔兰儿童和青年政策及结果的监测和评估 这项工作由经合组织秘书长负责出版。本文表达的意见和采用的论点不一定反映经合组织成员国的官方观点。该文件是在欧洲联盟的财政援助下编写的。本文表达的观点绝不能被视为反映欧洲联盟的官方意见。 本文件以及本文所包含的任何数据和地图均不影响任何领土的地位或主权,国际边界和边界的划定以及任何领土,城市或地区的名称。 请引用本出版物: 经合组织(2024),《爱尔兰儿童和青年政策及成果的监测和评估》,经合组织出版社,巴黎,https://doi.org/10.1787/2bd86a9d-en。 ISBN978-92-64-99960-2(PDF) ISBN978-92-64-98363-2(HTML) ISBN978-92-64-82293-1(epub) 照片信用:封面©Pressmaster/Shutterstock.com。 经合组织出版物的更正见:https://www.oecd.org/en/publications/support/corrigenda.html。 ©OECD2024 归因4.0国际(CCBY4.0) ThisworkismadeavailableundertheCreativeCommonsAttribution4.0Internationallicense.Byusingthiswork,youaccepttobeboundbythetermsofthislicense(https:///creativeecommons.org/licenses/by/4.0/). 归因你必须引用工作。 翻译-您必须引用原始作品,确定对原始作品的更改并添加以下文本:如果原始作品与翻译之间存在任何差异,则只有原始作品的文本才应被视为有效。 适应-您必须引用原始作品并添加以下内容:这是对经合组织原始作品的改编。在此改编中表达的意见和采用的论点不应被报告为代表经合组织或其成员国的正式观点。 第三方材料-许可证不适用于作品中的第三方材料。如果使用此类材料,您有责任获得第三方的许可以及任何侵权索赔。 未经明确许可或建议OECD认可您使用作品,您不得使用OECD徽标,视觉标识或封面图像。 根据本许可证产生的任何争议应根据2012年常设仲裁法院(PCA)仲裁规则通过仲裁解决。仲裁所在地应为巴黎(法国)。仲裁员人数应为一名。 前言 预计各国政府将证明其项目,计划和政策得到了有效和有效的实施并产生了积极的影响。由于对绩效的关注,经合组织越来越多的政府正在建立正式的监测和评估(M&E)系统,以监测和系统地评估其政策措施和干预措施。 严格的M&E系统是健全的政策决策以及持续学习和改进的关键。整个决策周期的所有决策和执行过程都可以从早期或其他地方实施的政策中汲取经验教训,并从中受益,这些经验教训导致了预期的结果。M&E还有助于使政府行动更加透明和负责。M&E提供了有关政府实现目标的详细信息,这反过来又促进了公众对所有相关利益相关者对政府决策的信心。 本报告《爱尔兰儿童和青年政策与成果的监测和评估》是一系列研究社会和就业政策领域的M&E的第四份报告,并就如何为爱尔兰儿童和青年的新政策框架制定M&E系统提供了指导。 本报告由经合组织就业、劳工和社会事务局青年和多样性政策股编写。 该行动由欧洲联盟通过技术支持工具资助,并由经合组织与欧洲委员会结构改革支持总局(DGREFORM)合作实施。经合发组织秘书处谨向改革署和爱尔兰儿童、平等、残疾、融合和青年司表示感谢,他们的支持对本报告的编写起到了重要作用。 目录 前言3 执行摘要5 1导言7 2监测和评估系统的目的9 3制定成果框架10 3.1.确定政策成果10 3.2.政策逻辑和结果链的衔接12 3.3.指标集的设计16 4监测结果19 4.1.用于监测的数据收集20 4.2.确保人力和财力资源来履行监测职能20 5评价规划22 6报告和传播调查结果24 6.1.建立在BOBF25 7结论27 参考文献29 附注32 Figures 图1.对政策的目标或影响以及得出的结果的说明性识别11 图2.结果链13 图3.ToC15的简化版本示例 图4.跨成果框架的监测类型19 图5.在线仪表板的示例,在结果链25之后进行结果分解 执行摘要 在过去十年中,爱尔兰表现出坚定的承诺,以增强儿童和年轻人的成果。在最近发表的报告《共同为爱尔兰的儿童和青年:迈向新的治理框架》中,经合组织评估了爱尔兰最近的政策,机构和立法发展,并提出了一系列建议,以加强政策和治理安排,以解决儿童贫困问题并改善儿童和青年的成果。 本报告伴随着主要报告,并为爱尔兰2023-28年新的国家儿童和年轻人政策框架的监测和评估(M&E)系统的开发提供了指导。该报告详细介绍了在建立一个强有力的基于成果的监测和评价系统时应该考虑的步骤顺序,该系统以国际良好做法范例和为更好的结果,更光明的未来(BOBF)制定的指标为基础,这是爱尔兰2014-20年期间的国家儿童和青年政策框架。 全面的基于结果的M&E系统是关键的公共管理工具,可帮助决策者跟踪进展并展示特定政策或干预措施所产生的影响。M &E系统可以帮助制定政策目标,确定有希望的做法,发现计划的弱点以及纠正这些弱点的潜在行动。它们也有助于促进决策的透明度和问责制。 虽然BOBF没有计划设计和实施全面的M&E框架,但其指标集的某些要素可能是设计基于结果的M&E系统的有用基石 。特别是,BOBF的指标集在成果一级具有广泛的指标,可以作为M&E系统成果框架的一部分进行整合。制定BOBF的广泛协商方法是另一项资产,可以帮助建立广泛的共识。为BOBF提供了专门的人力和财力资源,自采用BOBF以来,在M &E能力建设方面取得了进展。最后,爱尔兰有一个鼓励公共部门数据公开和透明的法律框架,这导致定期报告在监测 BOBF方面吸取的教训,并在最近几年制定了其他传播战略。 经合组织认为,这些要素可以作为爱尔兰为新的儿童和青年政策框架开发基于结果的正式M&E系统的垫脚石。该M&E 系统将允许对新政策框架的进展和绩效进行系统的监测和跟踪。对于该M&E系统的开发,经合组织建议爱尔兰考虑: 设计一个M&E系统,该系统建立在明确和全面地制定支持政策框架的变革逻辑的基础上。 为结果链的所有级别确定和定义SMART(即具体,可衡量,可实现,相关和有时限)指标,以支持新政策框架的M&E功能。 为政策框架的M&E系统的发展分配足够和适当的人力和财政资源。 为监测和评价结果制定全面的沟通和传播战略。 报告在现有指标和国际良好做法实例的基础上,为每一项建议提出了具体建议。 1Introduction 在过去十年中,爱尔兰进行了重大的政策,立法和组织改革,以减少儿童贫困并促进儿童和年轻人的更好成果。为了支持政府的努力并促进儿童和年轻人的变革,爱尔兰在2014年至2020年之间实施了《儿童和年轻人,更好的成果,更光明的未来 》国家政策框架(BOBF)(儿童和青年事务部,2014年。[1]).该框架之后有一些关键的组成战略,这些战略更详细地规定了特定领域的工作方案。其中包括前五个战略,2015-20年国家青年战略,2015-20年青年参与决策国家战略,国家育儿支持服务模式和LGBTI国家青年战略。在对BOBF进行中期审查之后(DCEDIY,2018。[2]),咨询委员会得出结论,BOBF导致了重要的首次举措,例如召集不同的政府部门讨论儿童贫困问题,加强儿童和青年对政策制定的参与以及与志愿部门的更紧密接触。尽管如此,人们也认识到,跨政府工作的障碍需要进一步关注,同时更加优先考虑政策干预措施。 最近的变化,包括将儿童和青年事务部(DCYA)扩大到2020年的儿童,平等,残疾,融合和青年部(DCEDIY),随着正在进行的Tsla,儿童和家庭机构的改革,以及欧洲儿童保障和爱尔兰青年:国家儿童和青年政策框架2023-28(DCEDIY,2023。[3]),提供一个机会,实现对儿童贫困的雄心勃勃的对策,并改善儿童和年轻人的成果。为此,经合组织通过欧盟委员会的技术支持工具,并与欧盟委员会结构改革支持总局(DGREFORM)合作,协助爱尔兰审查了加强当前解决儿童贫困和改善儿童和年轻人成果的政策和治理安排的措施(OECD,2024。[4]). 作为上述技术援助的一部分,本报告为爱尔兰新的儿童和年轻人政策框架的监测和评估(M&E)系统的开发提供了指导 。该报告详细介绍了在建立一个强有力的基于成果的监测和评价系统时应考虑的顺序步骤,该系统以国际良好做法实例和BOBF指标集中的现有指标为基础,该指标是目前用于跟踪爱尔兰儿童和年轻人成果进展的主要指标集。虽然BOBF没有计划设计和实施基于结果的监测和评价框架来跟踪政策框架的进展和绩效,但其指标集具有某些特征,使其有可能成为基于结果的监测和评价系统的基石。可以建立。 BOBF指标集于2017年首次发布,并伴随着2019年的方法论报告(DCEDIY,2019[5]),稍后于2022年更新(DCEDIY,2022[6]),并于2023年再次更名为“儿童和年轻人指标集”(DCEDIY,2023[7]).1根据2019年方法论报告,BOBF指标集的主要目标是跟踪BOBF概述的五个国家成果中0-24岁儿童和年轻人的进展。该报告明确指出,BOBF指标并非旨在解释政策框架上的特定行动或承诺是否或如何导致感兴趣的特定结果。然而,这些指标是有用的。 通过识别感兴趣的结果趋势并允许进行国际比较,支持BOBF的监测和实施(DCEDIY,2022[8]). 本报告的目的是探讨如何在BOBF的关键要素的基础上,为爱尔兰的儿童和青年政策框架开发一个M&E系统。报告首先简要解释了监测和评价系统的目的(第2节),然后详细说明了设计这种系统时要考虑的必要步骤,包括:制定成果框架(第3节)、监测成果(第4节)、评价规划(第5节)以及报告和传播调查结果(第6节)。结论部分总结了报告的主要信息并提供了具体建议(第7节)。重要的是要强调,没有一种独特的方法来建立,也许更重要的是,维持基于结果的M&E系统。这项任务应该被理解为一项正在进行和持续改进的工作。 2监测和评估系统的目的 各国政府越来越有义务展示政策成果。决策者和利益攸关方不仅对是否开展了活动和行动以及在何种程度上感兴趣,而且对此类干预措施产生的实际结果感兴趣。全面的基于结果的M&E系统可以帮助调查某个项目,计划或政策2是否实际上导致了它们最初旨在实现的预期中长期结果(Kse和Rist,2004年。[9])。M&E系统还可以提供有关在实现这些成就方面取得进展的信息,并确定在此过程中可能出现的任何挑战。总体而言,它可以对政府行动的实际结果产生反馈,并可以为以下问题提供答案:i)政策目标是什么?; ii)他们正在实现吗?;iii)如何证明这一成就? 运作正常的M&E系统提供的丰富信息对内部和外部利益相关者都很有用。在内部,M&E系统是必不可少的公共管理工具,可以帮助决策者跟踪进展并展示特定政策或干预措施的影响。但是M&E结果对公众也很重要,他们对政府行为的影响感兴趣,并期望这些行为会产生某些结果。建立完善的M&E系统可以帮助澄清和阐明政策目标,确定有希望的做法,甚至发现计划的弱点和纠正这些弱点的潜在行动。因此,监测和评价系统是提高决策透明度和问责制的重要工具。 监测和评价是独立但相辅相成的职能(经合组织,2002年[10]).虽然监测是一项持续的、主要是描述性的职能,提供关于一项政策在交付的行动及其衍生产品或产出方面的地位的信息,但另一方面,评估旨在就为什么以及如何取得或没有取得某些成果提供回应。例如,如果监控系统显示某些指标遵循特定模式(i.Procedres.目标人群无法获得感兴趣的服务),那么适当的评估工作应有助于澄清通过监测系统注意到的趋势(i。Procedres.服务吸收低的潜在解释)。如果