摘要：2015年10月，中共中央印发《干部教育培训工作条例》，提出建立健全干部教育培训评估制度，加强对干部教育培训机构、项目及课程的评估。新形势下加快干部教育培训项目评估研究，对推动教学改革、增强干部教育培训的针对性实效性，全面提高培训质量和效益，具有重要意义。本文着眼于培训活动的系统性、过程性，结合当前干部教育培训评估的现状和要求，以柯氏模型和过程评估理论为指导，从培训设计、培训实施、培训管理和培训效果四个方面初步构建了培训项目评估指标体系，为进一步推进干部教育培训的科学化、制度化、规范化提供一定的理论指导和实践依据。
关键词：培训；项目；评估
中图分类号：G720 文献标识码:A
干部教育培训评估是干部教育培训中不可或缺的重要环节，也是困扰干部教育培训工作的一大难题。《2013-2017年全国干部教育培训规划》首次提出，全面开展培训质量评估，对每个培训项目进行考核测评，结合不同培训项目特点，合理设置评估标准，努力探索科学的项目质量评估办法。2015年10月，中央印发《干部教育培训工作条例》，首次以党内法规的形式，对培训评估工作作出全面系统的阐释和界定。条例提出，要进一步建立健全干部教育培训评估制度，加强对干部教育培训机构、项目及课程的评估，明确了各类评估的全新要求及内容要义，为评估工作提供了基本遵循和指导方向。其中，项目评估作为一种全新的培训评估方式，成为培训领域广泛关注和研究的重要命题。如何结合不同培训项目特点，探索项目评估的理论和方法支撑、构建科学合理的评估内容和指标体系则成为重中之重。
一、干部教育培训项目评估概述
（一）项目评估的发展与探索
项目评估是保证培训效果和质量、改进培训工作、实现培训决策多元化的重要手段和途径。因此，项目评估不仅是培训工作流程中不可或缺的一个重要环节，更是提升培训质量、促进培训发展的必然要求。2003年，人事部出台《关于进一步加强国家公务员培训质量评估工作的意见》，进一步明确了公务员培训评估的目标原则、评估对象和主体、评估内容和方法等，培训评估的类型呈现多样化发展态势。其中，综合评估可以看做是项目评估的雏形，成为培训评估的重要内容。2007年，《“十一五”行政机关公务员培训纲要》提出建立健全培训质量评估制度，培训评估工作由此向科学化、制度化、规范化迈进了重要一步。2013年，中央印发《2013-2017年全国干部教育培训规划》，提出全面开展培训质量评估，从培训设计、实施、管理及培训效果等方面，对每个培训项目进行考核测评，把评估结果作为评价党校、行政学院、干部学院和社会主义学院办学质量的重要依据；作为确定高等学校、社会培训机构、境外培训机构承担培训任务的重要标准；作为干部教育培训机构推动教学改革、提高教学质量的重要指引，标志着培训评估工作进入全面发展阶段。2015年中央印发《干部教育培训工作条例》，首次明确界定了项目评估的组织实施、内容体系及结果应用。近年来，不少地区和部门在项目评估理论、方法、内容体系及指标构建等方面都进行了深入细致的研究，取得了一些经验和成果。但是，由于没有建立比较成熟的制度，这项工作基本上还处于探索阶段，很多评估缺乏系统性、过程性评估理念，没有形成科学的评估内容体系和指标体系，特别是鲜有对培训需求分析、培训计划制定等前端环节评估，因此很难发现培训中存在的问题，揭示导致问题出现的原因，也就不能采取有效措施对培训进行科学的修正，从而达到持续提高培训质量的目标。
（二）项目评估的内涵及特征
干部教育培训项目评估，是指运用科学的理论、技术、方法和程序对培训主体和培训活动的构思、设计、执行过程和实际效果进行的系统考察。旨在通过对培训过程中各个环节的考量，实现对培训机构的优劣评判、对培训任务承担者的选择取舍、对教学质量的改进提高。从这一概念不难看出，目前的培训项目评估已突破传统的评估理念和方法，呈现出自身的特点。一是项目评估具有科学的理论支撑。培训是以提高培训对象素质和能力为目的的有组织的社会干预活动，是社会项目的一种特定形式。因此，社会项目评估的理论为培训项目评估提供了科学的理论基础。二是项目评估具有全面性。项目评估是对培训主体、过程及实际效果的系统考察，不再以结果取向作为唯一目标，而是开始关注培训投入与产出之间的转换过程，将评估内容扩大到项目的设计和执行，实现对培训各阶段、各环节要素的全面考量。三是项目评估具有系统性。立足于培训活动本身，把培训看做是由一系列完整的、闭合的、环环相扣的培训链条所组成，不仅运用系统的、联系的观点，考量培训工作的全过程，而且确保各个环节之间的评估具有统一性和内在逻辑性。四是项目评估具有多目标性。项目评估因其全过程评估的特征，不仅可以作为评价机构办学质量的重要依据，作为培训机构承担培训任务的重要标准，还可以作为推动教学改革、提高教学质量的重要指引，从这个角度讲，开展项目评估研究具有很强的现实意义。
（三）项目评估和其他评估的区别与联系
机构评估、项目评估、课程评估作为干部教育培训评估的三种主要方式，共同构成了完整的评估体系。但无论从评估目标、评估主体，还是评估内容等方面，三种评估方式都各有侧重，不尽相同。从评估目标看，机构评估是依据一定的标准对培训机构的状况进行全面测评，旨在指导干部教育培训机构改进工作。项目评估重在为判定培训机构办学质量提供重要标准，为培训机构承担培训任务提供重要依据，为改进教学质量提供重要指引。课程评估则是通过对教学内容、教学方式、教学效果情况的测评，达到改进和提升教学质量，提高培训的针对性和实效性的目标。从评估主体看，干部教育培训管理部门负责培训机构的评估，项目评估主要由项目委托方组织实施，而课程评估则由培训机构组织实施。从评估内容上看，机构评估涉及的内容全面系统，既包括对资源投入、教学条件和设施、后勤保障等培训机构硬件的评估，又包括办学方针、培训质量、师资队伍、组织管理及学风建设等软件指标，可以说综合体现了培训机构的资质和实力。项目评估的侧重点是培训的过程及其效果，重点是对培训设计、实施、管理和培训效果的评估。课程评估的关注点则主要是教学质量。值得说明的是，机构评估与项目评估在评估内容上虽有部分交叉，但在机构评估中，培训质量在评估指标体系中仅占一小部分，效果测定的指数如果淹没在总体评价指数里，可能导致的结果是，合格的培训机构不一定培养出合格的学生。由此可见，机构评估、项目评估和课程评估各有侧重，并行不悖，不能互相代替。
二、培训项目评估的理论与方法
（一）柯氏评估理论
目前，国内外运用最为广泛的培训评估方法是柯克帕特里克于1959年提出的四层次评估模型。该评估模型主要包括四个层面的内容，即反应层评估、学习层评估、行为层评估和结果层评估。反应层评估主要是考评培训对象对培训项目的看法，包括对培训内容、培训方式、授课教师、学习资料、组织管理等方面进行评估。目的在于及时了解培训对象对培训有关环节或整个培训项目的真实感受,听取意见建议,不断改进培训工作。反应层评估多采用问卷调查、面谈、观察等方法进行。学习层评估主要是考评培训对象对知识和技能的掌握程度。即从培训项目中学到了什么、掌握到何种程度。学习层评估多采取测验或考试、问卷调查、分析培训对象心得报告等方法进行。行为层评估是用来测定培训对象在日常工作中是否自觉运用了培训所学到的知识和技能，提高工作绩效。行为层评估主要由上级、同事、下属观察培训对象的行为在培训前后是否有差别，多采取选取培训前和培训后两个时点对培训对象的行为进行对照，观测培训对象行为改变情况的方法来进行。结果层的评估是培训评估中最为重要的部分，其目的是评估培训对象在实际工作中由于行为的改变,在多大程度上提高了个人绩效和组织绩效。结果层评估可以通过组织效能和个人岗位职责完成情况进行分析。
（二）以培训活动为主体的评估理论
以培训活动为主体的培训评估主要是按照培训活动的时序进行的一种评估，也称过程评估，包括培训前评估、培训中评估和培训后评估。培训前评估是指在培训活动实施前对培训对象的知识和能力水平、培训需求等状况进行系统考察，作为制定培训规划或计划的科学依据，旨在最大限度地保证培训需求确认的科学性，培训计划与实际需求的合理衔接，同时也在一定程度上保证培训资源的合理配置。培训前评估主要包括组织需求评估、培训对象的知识评估和能力评估。培训中评估是指按照培训计划和目标，用科学的方法和程序对培训活动实施状况进行全面的监测和控制，旨在发现和确认培训活动和培训计划之间的差异，以便及时采取措施保证培训活动按照计划进行或对培训计划做出科学的判断和调整。培训中评估主要包括培训对象参与状况评估、培训内容评估、培训进度和中间效果评估、培训环境评估、对培训机构和培训人员的评估等方面的内容。培训后评估是指培训结束后对培训活动各方面的系统考察和评价，是培训评估工作中最为重要的部分。目的在于使培训组织者了解培训预期目标的实现程度，为后期培训计划、培训项目的制定与实施等提供科学依据。主要包括培训活动的直接产出评估、培训活动客观影响的测定等。柯氏四层次评估模型在西方得到广泛认可,具有一定的科学性和先进性。但经过认真分析，不难发现，该评估模型中的前两个层次主要是对培训过程进行评估，后两个层次主要是对培训结果进行评估，对培训的前端性环节，如培训对象的知识能力状况、培训需求、培训计划制定情况等并未考虑，评估的内容具有不完整性。且该模型偏重于培训评估的定性研究,特别是对行为层和结果层评估，量化考核的难度很大，很多培训成效的评估无法操作。因此，本文在借鉴柯氏模型的基础上，重点引入以培训活动为主体的评估理论与方法，借以作为培训项目评估的重要依据。
三、培训项目评估指标体系构建
干部教育培训是由多要素组成的复杂系统，从时序性看，各培训环节都涵盖了一定的工作内容。实现对培训质量进行全面科学的监测和评估，一种有效的方法就是从定性到定量的综合集成。其中，最重要的环节就是要建立起一套能量化的指标体系。只有建立一套科学、严密、完整的评估指标体系，才能对培训活动进行科学的监测、评估和预测，衡量和了解培训目标实现的程度，从而为培训活动提供辅助决策，使培训活动不偏离预定目标。因此，本文根据《干部教育培训工作条例》关于培训项目评估的内容要求，以柯氏模型和过程评估理论为指导，结合干部教育培训实践，从培训设计、实施、管理和培训效果四个方面初步构建了培训项目评估的内容和指标体系。
（一）培训设计评估的指标体系
培训设计是培训项目实施的前诊环节，培训设计评估旨在考量培训组织者是否将培训需求调研作为培训计划生成的必经环节，并以此为依据设计培训项目，提出教学计划。培训设计评估的重点内容是培训需求适配度评估和培训计划科学性评估。具体评估指标包括：一是组织需求分析。主要是对培训对象履行职责所面临的各种宏观环境和微观环境的评估。包括党和国家工作大局、经济社会发展对干部素质能力的要求、中央对干部教育培训工作的部署安排、培训对象所在组织的工作任务、组织人事制度等。二是培训对象的知识评估。即运用科学的方法评价和判断培训对象对从事工作所需要的基础知识的掌握程度，可以从四个方面进行。第一，确定知识边界。根据培训对象所从事的实际工作，明确应该具备哪些履职尽责的知识以及对培训对象来说这些知识的相对重要性。第二，确定评估标准。明确培训对象对这些知识应该掌握到什么程度。第三，测定培训对象已具备的知识水平。第四，确定必备知识和已备知识之间的差距。三是培训对象的能力评估。能力评估也要遵循四个步骤。首先，根据工作需要确定能力界限，明确培训对象应该具备的能力类型和层次，明确对培训对象来说这些不同能力的相对重要性。其次，确定能力标准，即确定培训对象所需要的能力应达到什么程度。再次，确定培训对象已具备的能力和程度。最后，判断应备能力和已备能力之间的差距。四是培训计划的科学性评估。主要考量培训计划能否体现培训需求。具体包括培训目标的确定性、培训时间与周期的合理性、培训课程的针对性、培训师资的适当性、培训方式的可行性、培训经费的保障性及培训方案的可操作性等。
（二）培训实施评估的指标体系
培训实施评估是对培训项目执行情况的监测。评估的重点内容是课程设置的科学性评估、教学内容的满意度评估、教学方法的有效性评估、教学组织的有序性评估、师资选配的合理性评估及培训进度和中间效果评估。具体评估指标包括：一是课程设置的科学性评估。重点考量课程设置是否紧紧围绕党和国家事业发展需要，体现参训人员的岗位职责和健康成长需求；是否体现能力建设要求，将参训人员的能力培养贯穿始终；是否以问题为导向，引导参训人员运用所学理论和知识指导实践、推动工作。二是教学内容满意度评估。重点评价是否存在实际教学内容为非计划培训内容、教学内容是否缺失甚至错位、教学内容与培训主题的契合度、教学内容的针对性和实效性、学员对教学内容的理解和接受程度等。三是教学方法有效性评估。包括教学方法是否符合学员特点、是否综合运用多种教学方式、能否充分调动学员积极参与、教学互动气氛是否活跃等。四是教学组织有序性评估。主要考察培训时间进度和资源投入进度是否按计划进行。五是师资选配合理性评估。师资的理论水平、实践经验、授课技巧、课件质量等可以作为设定评估指标的参考要素。五是培训进度和中间效果评估，主要是通过评估培训对象在不同培训阶段的提高幅度，判断其所取得的进步和培训计划的阶段目标的接近程度。
（三）培训管理评估的指标体系
培训管理评估的重点是考量培训机构及其管理制度的完善程度。具体指标包括：一是对培训机构的评估。包括培训机构的规模和结构特征、培训机构的内部分工、培训机构的领导体制、培训机构的沟通机制和协调机制等。二是对培训人员的评估，可通过培训人员的素质和能力是否适应培训的需要、不同培训人员之间的任务分配是否合理、培训人员的服务意识和工作态度等来反映。三是培训管理制度建设评估。重点评估各项培训管理制度是否健全以及在培训中是否有效执行。包括培训考勤制度、培训评估制度、培训考核制度、培训档案管理制度的建设及执行情况。四是师资队伍建设评估。主要对师资队伍的规模、素质、结构及师资队伍的管理情况进行考量。五是培训条件评估。可以从培训基地建设、教学辅助系统、教学环境、食宿条件等方面来反映。六是培训经费的使用和管理评估。主要通过经费保障、经费使用、预算与实际支出的差异等指标来体现。七是学风评估。包括培训机构的办学方针、学员管理及教学管理制度，教师治学施教的作风，学员的学习态度、参与程度、互动效果、学习成果、学员遵守纪律的情况等。
（四）培训效果评估的指标体系
培训效果评估重点是考量培训对象接受培训后知识、素质及能力的提升情况。具体指标包括：一是对培训活动直接产出的评估。可以用参训人数、培训覆盖率（实际参训人数占计划人数的比例）、覆盖效率（符合参训条件的实际参训人数占总参训人数的比例）、培训合格率（达到培训考核要求的实际参训人数占总参训人数的比例）等指标来反映。二是培训质量评估。可以通过授课内容满意度、授课效果满意度、培训方式满意度、教学方法满意度、组织管理满意度、条件保障满意度等指标来表征。三是培训学员在培训后工作能力及素质的提高程度。可以考虑从学员理论修养的提高程度、知识更新的程度、解决问题能力的提高程度、工作态度的改进程度等方面设定评估指标。四是培训活动客观影响的评估。可以通过培训学员参加培训后运用所学知识和技能解决实际问题的情况、学员所在单位领导和同事对其培训结束后能力、素质变化的评价、培训学员自我评价的确认程度等方面来反映。
四、结语
开展干部教育培训项目评估研究，是一个有意义但又纷繁复杂的事情，旨在突破传统重效果轻源头和过程的评估局限，转向对干部教育培训质量进行全面的考核评估。因此，本文无论从评估对象的界定、评估内容体系的构建还是具体指标的设定上，都力图系统全面反映培训活动的全过程。值得说明的是，由于干部教育培训是一项系统工程，涉及的要素众多，结构复杂，关联密切，在内容体系和具体指标构建过程中，还存在不全面、不科学、不完善的问题，以期通过在今后的培训工作中不断研究探索，加以改进。
参考文献
[1]中共中央组织部干部教育局.干部教育培训工作条例（试行）学习辅导[M].北京:党建读物出版社,2006.
[2]中共中央办公厅.2010－2020年干部教育培训改革纲要[EB/OL].
[3]中共中央办公厅.2013－2017年全国干部教育培训规划[EB/OL].
[4]钟定国.培训效果评估的方法选择[J].中国培训，2003,(3).
[5]王学用.我国干部教育培训项目评估研究——以无锡新区为例[D].上海:复旦大学,2009.
[6]财政部干部教育中心.培训创新思维[M].北京:经济科学出版社,2008.
作者：刘彦琴 杨枝华 张一尔 单位：国土资源部人力资源开发中心
