4。1教育政策监测与评价体系的理论研究
4。1。1监测与评价的概念解析及功能比较
纵观西方发达国家及国际组织的实践,监测与评价成为政策管理最重要的工具之一,它覆盖了从政策提出到完成的全部环节。通过引入监测与评价,政策的推行与完善并行,不仅能保证政策目标最大程度得以实现,还能从已有政策制定与推行中总结经验和教训,提高未来教育政策的成效。尽管监测与评价往往同时提及,但它们在概念和功能上有着本质区别,因此有必要厘清这两个概念的区别和联系,这也是正确使用监测与评价的基础。
4。1。1。1监测
监测(m)是由政策实施机构所主导的内部管理活动,是一个收集和分析有关政策进展、政策预期目标达成度等方面信息的动态持续过程。通常借助连续性的、关键性产出指标对政策覆盖对象进行连续性的数据收集,比较实际产出和预期产出,考察政策覆盖对象的发展变化,以监督政策是否按照预期开展和实施,政策的预期目标是否实现。
监测主要回答以下五个关键问题[1]:(1)政策是否按照计划推行与实施?(2)政策的投入是否很好地指向了目标人群?(3)预期产出是否有效完成?(4)在实现政策结果的过程中,我们面对哪些问题、风险及挑战?(5)针对政策执行过程中发生的变化,需要做出什么调整?
通过回答以上问题,管理者可以及时发现并改正不足,并做出调整方案或出台配套措施。一方面,可以有效地干预政策实施;另一方面,还能促进政策制定者、实施者之间达成一致意见,明确政策实施的工作重心,强化各方责任,提高政策资源配置的合理程度。同时,高质量监测所获得的信息也是政策评价重要的信息来源[2]。
4。1。1。2评价
评价通常由独立的第三方评价机构实施,是对计划中的、正在实施的或已经完成的政策的系统地、客观地评价,包括对它们的设计、实施及结果的评价。其目的在于确定政策预期结果与实际结果的关联度和达成度,评估政策的效率、效益及影响力和可持续性。
评价主要回答以下四个关键问题:(1)结果实现或不能实现的原因是什么?(2)政策的实施对覆盖人群的具体贡献(影响)是什么?(3)我们怎样才能改进政策的结果?(4)从该项政策中,我们获得哪些经验和教训?
高质量的评价能给政策受益者和资金提供者提供可靠和有用的信息,使双方获得政策实施教训和经验,以改进行为决策,更进一步,评价是对政策执行实施问责、合理性论证的重要基础[3]。
4。1。1。3监测和评价的互补性
表4-1呈现了监测与评价互补的特点,从表中可以看到,为保证政策取得最大成功,监测与评价应与政策的筹划同步进行,二者缺一不可:(1)监测能及时提供政策执行过程中的相关信息及管理者执行政策所需的信息,同时也提供政策预期效果及其成因方面的信息,因此评价中的大部分信息来源于监测;(2)监测给评价提供了必要的信息,但这些信息并不充分,评价还需要利用其他数据收集工具及系统的分析框架对政策进行评价;(3)监测的设计和实施必须充分考虑评价的需要,因为清晰的政策目标、监测指标等是评价能否获得成功的前提[4]。
表4-1监测和评价的角色
4。1。2教育政策的监测与评价系统
监测和评价是政策制定与推行过程的重要部分,从本质上而言,监测是评价的信息基础,如果忽略对政策过程的监测,评价的作用也会大打折扣。教育政策的监测系统是可以识别政策目标、监督政策实施过程及改进政策实施结果的信息管理系统,它用于评估政策的有效性和报告政策实施进展情况;教育政策的评价系统则是给政策受益者和资金提供者提供可靠和有用的信息,使双方获得政策实施教训和经验,以改进行为决策,是对政策执行实施问责、评估政策的效率、效益及影响力和可持续性的信息系统。建立一个有效的监测与评价系统需要政策制定者的支持和相关技术准备。监测与评价系统的构建通常包括五个方面:(1)监测与评价指标体系建构;(2)数据信息采集;(3)数据管理与分析;(4)信息公告和发布系统;(5)关键执行者间(数据采集者、数据分析者、政策制定者及政策实施者)的组织安排。
4。1。2。1教育政策监测与评价的指标体系
1。监测与评价指标的类型
建立良好的指标体系(indi)是实施政策监测与评价的基础与核心,一个良好的指标体系应当是富有逻辑的、具有针对性的完整体系,组成这一指标体系的指标应当具备针对性、可得性、可跟踪性和时效性四个特征[5]。根据指标测量的对象及用途不同,可以将监测与评价指标分为投入、产出、结果和影响指标四类(详见表4-2)。其中,监测主要关注政策的投入(input)、产出(output)及结果(oute);评价既关注政策结果(oute),同时更关注政策的影响(impact)。这里,投入是指获得产出所需要的人力、物力、财力及相关资源,通常用来分析政策的资源是否严格按照预期规划分配;产出是指实现预期结果的必要基础,设立产出指标的目的是测度政策干预给覆盖群体带来的直接变化——不受政策外因素影响;结果是指政策覆盖群体的实际结果达到预期结果的状况——受政策干预外因素影响,设立结果指标的目的是测度政策推行对目标群体产生的短期或中期效应(short-termaermeffects);影响指标主要描述政策实施给目标群体生活、发展状况带来的正面或负面影响(如政策对目标群体教育公平等方面的影响),它通常用来测度政策推行的长期效应(los),包括预期或非预期的直接、间接效应,所选指标一般是就结果指标对政策目标群体所进行的横向、纵向比较。投入与产出指标属于中间指标(ieindicator),结果和影响指标属于终极指标(finalindicator),终极指标与某一政策目标直接关联,是目标达成度的直接或间接测度;中间指标是对如何达到终极指标的测度,其测量的是政策干预情况及这种干预直接的产出。两者的根本区别是中间指标仅受政策单一因素影响,而终极指标受政策外其他因素影响。以“两免一补”政策为例,中小学的财政和资源投入指标及在校生数、校舍建筑面积等由投入产生的产品或服务指标都属于中间指标;而入学率、识字率、学业成绩等反映政策目标达成情况及政策目标对覆盖人群产生影响的指标属于终极指标。
表4-2教育政策监测与评价指标分类
2。构建监测与评价指标体系的意义
构建监测与评价指标体系是为了后续监测与评价的顺利展开,获取政策实施、推进、目标达成情况的信息,是为政策监测与评价的研究设计、经验研究等方面服务的。总体来看,构建监测与评价指标体系意义主要体现在以下三个方面。
第一,有助于理清政策实施与政策效果之间的逻辑关系。良好的监测与评价指标体系能够体现政策实施过程中投入、产出、结果之间的逻辑关系,有助于政策管理者理清政策实施与效果之间的相关关系或因果关系,这对于政策评价来说至关重要。
第二,有助于政策监测与评价的顺利开展。指标体系的构建是监测与评价的核心,它引导着后续的研究设计、数据收集、分析及报告撰写等工作。因此,良好的监测与评价指标体系有利于政策监测与评价的顺利开展,决定着政策监测与评价的科学性、客观性。
第三,有助于政策决策科学化,提高政策实施的绩效和效率。监测与评价指标体系构建的过程也是深入认识政策本身、细化政策干预活动的过程,是对政策的重新审视。与此同时,通过监测与评价指标体系收集的数据也可以反映政策存在的问题。因此,监测与评价指标体系的构建,综合了政策文本分析和数据反馈的双重信息,有利于政策决策的科学化,从而提高政策实施的绩效和效率。
4。1。2。2教育政策监测与评价的数据信息采集
完备、充足、有效的资料是进行监测与评价的前提。同时,监测与评价资料的收集必须紧扣政策监测与评价指标体系。目前,教育政策监测与评价的数据信息采集渠道主要有两种:调研资料及管理者现有的第二手资料。
1。调研资料