干部教育培训项目评估研究_全国干部教育培训

干部教育培训项目评估研究

本文着眼于培训活动的系统性、过程性，结合当前干部教育 培训评估的现状和要求，以柯氏模型和过程评估理论为指导， 从培训设计、培训实施、培训管理和培训效果四个方面初步 构建了培训项目评估指标体系，为进一步推进干部教育培训 的科学化、制度化、规范化提供一定的理论指导和实践依据。

关键词：培训；
项目；
评估 中图分类号：G720 文献标识码:A 干部教育培训评估是干部教育培训中不可或缺的重要 环节，也是困扰干部教育培训工作的一大难题。《2013-2017 年全国干部教育培训规划》首次提出，全面开展培训质量评 估，对每个培训项目进行考核测评，结合不同培训项目特点， 合理设置评估标准，努力探索科学的项目质量评估办法。

2015年10月，中央印发《干部教育培训工作条例》，首次以 党内法规的形式，对培训评估工作作出全面系统的阐释和界 定。条例提出，要进一步建立健全干部教育培训评估制度， 加强对干部教育培训机构、项目及课程的评估，明确了各类 评估的全新要求及内容要义，为评估工作提供了基本遵循和指导方向。其中，项目评估作为一种全新的培训评估方式， 成为培训领域广泛关注和研究的重要命题。如何结合不同培 训项目特点，探索项目评估的理论和方法支撑、构建科学合 理的评估内容和指标体系则成为重中之重。

一、干部教育培训项目评估概述 （一）项目评估的发展与探索 项目评估是保证培训效果和质量、改进培训工作、实现 培训决策多元化的重要手段和途径。因此，项目评估不仅是 培训工作流程中不可或缺的一个重要环节，更是提升培训质 量、促进培训发展的必然要求。2003年，人事部出台《关于 进一步加强国家公务员培训质量评估工作的意见》，进一步 明确了公务员培训评估的目标原则、评估对象和主体、评估 内容和方法等，培训评估的类型呈现多样化发展态势。其中， 综合评估可以看做是项目评估的雏形，成为培训评估的重要 内容。2007年，《“十一五”行政机关公务员培训纲要》提 出建立健全培训质量评估制度，培训评估工作由此向科学化、 制度化、规范化迈进了重要一步。2013年，中央印发 《2013-2017年全国干部教育培训规划》，提出全面开展培 训质量评估，从培训设计、实施、管理及培训效果等方面， 对每个培训项目进行考核测评，把评估结果作为评价党校、 行政学院、干部学院和社会主义学院办学质量的重要依据；

作为确定高等学校、社会培训机构、境外培训机构承担培训 任务的重要标准；
作为干部教育培训机构推动教学改革、提高教学质量的重要指引，标志着培训评估工作进入全面发展 阶段。2015年中央印发《干部教育培训工作条例》，首次明 确界定了项目评估的组织实施、内容体系及结果应用。近年 来，不少地区和部门在项目评估理论、方法、内容体系及指 标构建等方面都进行了深入细致的研究，取得了一些经验和 成果。但是，由于没有建立比较成熟的制度，这项工作基本 上还处于探索阶段，很多评估缺乏系统性、过程性评估理念， 没有形成科学的评估内容体系和指标体系，特别是鲜有对培 训需求分析、培训计划制定等前端环节评估，因此很难发现 培训中存在的问题，揭示导致问题出现的原因，也就不能采 取有效措施对培训进行科学的修正，从而达到持续提高培训 质量的目标。

（二）项目评估的内涵及特征 干部教育培训项目评估，是指运用科学的理论、技术、 方法和程序对培训主体和培训活动的构思、设计、执行过程 和实际效果进行的系统考察。旨在通过对培训过程中各个环 节的考量，实现对培训机构的优劣评判、对培训任务承担者 的选择取舍、对教学质量的改进提高。从这一概念不难看出， 目前的培训项目评估已突破传统的评估理念和方法，呈现出 自身的特点。一是项目评估具有科学的理论支撑。培训是以 提高培训对象素质和能力为目的的有组织的社会干预活动， 是社会项目的一种特定形式。因此，社会项目评估的理论为 培训项目评估提供了科学的理论基础。二是项目评估具有全面性。项目评估是对培训主体、过程及实际效果的系统考察， 不再以结果取向作为唯一目标，而是开始关注培训投入与产 出之间的转换过程，将评估内容扩大到项目的设计和执行， 实现对培训各阶段、各环节要素的全面考量。三是项目评估 具有系统性。立足于培训活动本身，把培训看做是由一系列 完整的、闭合的、环环相扣的培训链条所组成，不仅运用系 统的、联系的观点，考量培训工作的全过程，而且确保各个 环节之间的评估具有统一性和内在逻辑性。四是项目评估具 有多目标性。项目评估因其全过程评估的特征，不仅可以作 为评价机构办学质量的重要依据，作为培训机构承担培训任 务的重要标准，还可以作为推动教学改革、提高教学质量的 重要指引，从这个角度讲，开展项目评估研究具有很强的现 实意义。

（三）项目评估和其他评估的区别与联系 机构评估、项目评估、课程评估作为干部教育培训评估 的三种主要方式，共同构成了完整的评估体系。但无论从评 估目标、评估主体，还是评估内容等方面，三种评估方式都 各有侧重，不尽相同。从评估目标看，机构评估是依据一定 的标准对培训机构的状况进行全面测评，旨在指导干部教育 培训机构改进工作。项目评估重在为判定培训机构办学质量 提供重要标准，为培训机构承担培训任务提供重要依据，为 改进教学质量提供重要指引。课程评估则是通过对教学内容、 教学方式、教学效果情况的测评，达到改进和提升教学质量，提高培训的针对性和实效性的目标。从评估主体看，干部教 育培训管理部门负责培训机构的评估，项目评估主要由项目 委托方组织实施，而课程评估则由培训机构组织实施。从评 估内容上看，机构评估涉及的内容全面系统，既包括对资源 投入、教学条件和设施、后勤保障等培训机构硬件的评估， 又包括办学方针、培训质量、师资队伍、组织管理及学风建 设等软件指标，可以说综合体现了培训机构的资质和实力。

项目评估的侧重点是培训的过程及其效果，重点是对培训设 计、实施、管理和培训效果的评估。课程评估的关注点则主 要是教学质量。值得说明的是，机构评估与项目评估在评估 内容上虽有部分交叉，但在机构评估中，培训质量在评估指 标体系中仅占一小部分，效果测定的指数如果淹没在总体评 价指数里，可能导致的结果是，合格的培训机构不一定培养 出合格的学生。由此可见，机构评估、项目评估和课程评估 各有侧重，并行不悖，不能互相代替。

二、培训项目评估的理论与方法 （一）柯氏评估理论 目前，国内外运用最为广泛的培训评估方法是柯克帕特 里克于1959年提出的四层次评估模型。该评估模型主要包括 四个层面的内容，即反应层评估、学习层评估、行为层评估 和结果层评估。反应层评估主要是考评培训对象对培训项目 的看法，包括对培训内容、培训方式、授课教师、学习资料、 组织管理等方面进行评估。目的在于及时了解培训对象对培训有关环节或整个培训项目的真实感受,听取意见建议,不 断改进培训工作。反应层评估多采用问卷调查、面谈、观察 等方法进行。学习层评估主要是考评培训对象对知识和技能 的掌握程度。即从培训项目中学到了什么、掌握到何种程度。

学习层评估多采取测验或考试、问卷调查、分析培训对象心 得报告等方法进行。行为层评估是用来测定培训对象在日常 工作中是否自觉运用了培训所学到的知识和技能，提高工作 绩效。行为层评估主要由上级、同事、下属观察培训对象的 行为在培训前后是否有差别，多采取选取培训前和培训后两 个时点对培训对象的行为进行对照，观测培训对象行为改变 情况的方法来进行。结果层的评估是培训评估中最为重要的 部分，其目的是评估培训对象在实际工作中由于行为的改变, 在多大程度上提高了个人绩效和组织绩效。结果层评估可以 通过组织效能和个人岗位职责完成情况进行分析。

（二）以培训活动为主体的评估理论 以培训活动为主体的培训评估主要是按照培训活动的 时序进行的一种评估，也称过程评估，包括培训前评估、培 训中评估和培训后评估。培训前评估是指在培训活动实施前 对培训对象的知识和能力水平、培训需求等状况进行系统考 察，作为制定培训规划或计划的科学依据，旨在最大限度地 保证培训需求确认的科学性，培训计划与实际需求的合理衔 接，同时也在一定程度上保证培训资源的合理配置。培训前 评估主要包括组织需求评估、培训对象的知识评估和能力评估。培训中评估是指按照培训计划和目标，用科学的方法和 程序对培训活动实施状况进行全面的监测和控制，旨在发现 和确认培训活动和培训计划之间的差异，以便及时采取措施 保证培训活动按照计划进行或对培训计划做出科学的判断 和调整。培训中评估主要包括培训对象参与状况评估、培训 内容评估、培训进度和中间效果评估、培训环境评估、对培 训机构和培训人员的评估等方面的内容。培训后评估是指培 训结束后对培训活动各方面的系统考察和评价，是培训评估 工作中最为重要的部分。目的在于使培训组织者了解培训预 期目标的实现程度，为后期培训计划、培训项目的制定与实 施等提供科学依据。主要包括培训活动的直接产出评估、培 训活动客观影响的测定等。柯氏四层次评估模型在西方得到 广泛认可,具有一定的科学性和先进性。但经过认真分析， 不难发现，该评估模型中的前两个层次主要是对培训过程进 行评估，后两个层次主要是对培训结果进行评估，对培训的 前端性环节，如培训对象的知识能力状况、培训需求、培训 计划制定情况等并未考虑，评估的内容具有不完整性。且该 模型偏重于培训评估的定性研究,特别是对行为层和结果层 评估，量化考核的难度很大，很多培训成效的评估无法操作。

因此，本文在借鉴柯氏模型的基础上，重点引入以培训活动 为主体的评估理论与方法，借以作为培训项目评估的重要依 据。

三、培训项目评估指标体系构建干部教育培训是由多要素组成的复杂系统，从时序性看， 各培训环节都涵盖了一定的工作内容。实现对培训质量进行 全面科学的监测和评估，一种有效的方法就是从定性到定量 的综合集成。其中，最重要的环节就是要建立起一套能量化 的指标体系。只有建立一套科学、严密、完整的评估指标体 系，才能对培训活动进行科学的监测、评估和预测，衡量和 了解培训目标实现的程度，从而为培训活动提供辅助决策， 使培训活动不偏离预定目标。因此，本文根据《干部教育培 训工作条例》关于培训项目评估的内容要求，以柯氏模型和 过程评估理论为指导，结合干部教育培训实践，从培训设计、 实施、管理和培训效果四个方面初步构建了培训项目评估的 内容和指标体系。

（一）培训设计评估的指标体系 培训设计是培训项目实施的前诊环节，培训设计评估旨 在考量培训组织者是否将培训需求调研作为培训计划生成 的必经环节，并以此为依据设计培训项目，提出教学计划。

培训设计评估的重点内容是培训需求适配度评估和培训计 划科学性评估。具体评估指标包括：一是组织需求分析。主 要是对培训对象履行职责所面临的各种宏观环境和微观环 境的评估。包括党和国家工作大局、经济社会发展对干部素 质能力的要求、中央对干部教育培训工作的部署安排、培训 对象所在组织的工作任务、组织人事制度等。二是培训对象 的知识评估。即运用科学的方法评价和判断培训对象对从事工作所需要的基础知识的掌握程度，可以从四个方面进行。

第一，确定知识边界。根据培训对象所从事的实际工作，明 确应该具备哪些履职尽责的知识以及对培训对象来说这些 知识的相对重要性。第二，确定评估标准。明确培训对象对 这些知识应该掌握到什么程度。第三，测定培训对象已具备 的知识水平。第四，确定必备知识和已备知识之间的差距。

三是培训对象的能力评估。能力评估也要遵循四个步骤。首 先，根据工作需要确定能力界限，明确培训对象应该具备的 能力类型和层次，明确对培训对象来说这些不同能力的相对 重要性。其次，确定能力标准，即确定培训对象所需要的能 力应达到什么程度。再次，确定培训对象已具备的能力和程 度。最后，判断应备能力和已备能力之间的差距。四是培训 计划的科学性评估。主要考量培训计划能否体现培训需求。

具体包括培训目标的确定性、培训时间与周期的合理性、培 训课程的针对性、培训师资的适当性、培训方式的可行性、 培训经费的保障性及培训方案的可操作性等。

（二）培训实施评估的指标体系 培训实施评估是对培训项目执行情况的监测。评估的重 点内容是课程设置的科学性评估、教学内容的满意度评估、 教学方法的有效性评估、教学组织的有序性评估、师资选配 的合理性评估及培训进度和中间效果评估。具体评估指标包 括：一是课程设置的科学性评估。重点考量课程设置是否紧 紧围绕党和国家事业发展需要，体现参训人员的岗位职责和健康成长需求；
是否体现能力建设要求，将参训人员的能力 培养贯穿始终；
是否以问题为导向，引导参训人员运用所学 理论和知识指导实践、推动工作。二是教学内容满意度评估。

重点评价是否存在实际教学内容为非计划培训内容、教学内 容是否缺失甚至错位、教学内容与培训主题的契合度、教学 内容的针对性和实效性、学员对教学内容的理解和接受程度 等。三是教学方法有效性评估。包括教学方法是否符合学员 特点、是否综合运用多种教学方式、能否充分调动学员积极 参与、教学互动气氛是否活跃等。四是教学组织有序性评估。

主要考察培训时间进度和资源投入进度是否按计划进行。五 是师资选配合理性评估。师资的理论水平、实践经验、授课 技巧、课件质量等可以作为设定评估指标的参考要素。五是 培训进度和中间效果评估，主要是通过评估培训对象在不同 培训阶段的提高幅度，判断其所取得的进步和培训计划的阶 段目标的接近程度。

（三）培训管理评估的指标体系 培训管理评估的重点是考量培训机构及其管理制度的 完善程度。具体指标包括：一是对培训机构的评估。包括培 训机构的规模和结构特征、培训机构的内部分工、培训机构 的领导体制、培训机构的沟通机制和协调机制等。二是对培 训人员的评估，可通过培训人员的素质和能力是否适应培训 的需要、不同培训人员之间的任务分配是否合理、培训人员 的服务意识和工作态度等来反映。三是培训管理制度建设评估。重点评估各项培训管理制度是否健全以及在培训中是否 有效执行。包括培训考勤制度、培训评估制度、培训考核制 度、培训档案管理制度的建设及执行情况。四是师资队伍建 设评估。主要对师资队伍的规模、素质、结构及师资队伍的 管理情况进行考量。五是培训条件评估。可以从培训基地建 设、教学辅助系统、教学环境、食宿条件等方面来反映。六 是培训经费的使用和管理评估。主要通过经费保障、经费使 用、预算与实际支出的差异等指标来体现。七是学风评估。

包括培训机构的办学方针、学员管理及教学管理制度，教师 治学施教的作风，学员的学习态度、参与程度、互动效果、 学习成果、学员遵守纪律的情况等。

（四）培训效果评估的指标体系 培训效果评估重点是考量培训对象接受培训后知识、素 质及能力的提升情况。具体指标包括：一是对培训活动直接 产出的评估。可以用参训人数、培训覆盖率（实际参训人数 占计划人数的比例）、覆盖效率（符合参训条件的实际参训 人数占总参训人数的比例）、培训合格率（达到培训考核要 求的实际参训人数占总参训人数的比例）等指标来反映。二 是培训质量评估。可以通过授课内容满意度、授课效果满意 度、培训方式满意度、教学方法满意度、组织管理满意度、 条件保障满意度等指标来表征。三是培训学员在培训后工作 能力及素质的提高程度。可以考虑从学员理论修养的提高程 度、知识更新的程度、解决问题能力的提高程度、工作态度的改进程度等方面设定评估指标。四是培训活动客观影响的 评估。可以通过培训学员参加培训后运用所学知识和技能解 决实际问题的情况、学员所在单位领导和同事对其培训结束 后能力、素质变化的评价、培训学员自我评价的确认程度等 方面来反映。

四、结语 开展干部教育培训项目评估研究，是一个有意义但又纷 繁复杂的事情，旨在突破传统重效果轻源头和过程的评估局 限，转向对干部教育培训质量进行全面的考核评估。因此， 本文无论从评估对象的界定、评估内容体系的构建还是具体 指标的设定上，都力图系统全面反映培训活动的全过程。值 得说明的是，由于干部教育培训是一项系统工程，涉及的要 素众多，结构复杂，关联密切，在内容体系和具体指标构建 过程中，还存在不全面、不科学、不完善的问题，以期通过 在今后的培训工作中不断研究探索，加以改进。

参考文献 [1]中共中央组织部干部教育局.干部教育培训工作条 例（试行）学习辅导[M].北京:党建读物出版社,2006. [2]中共中央办公厅.2010－2020年干部教育培训改革 纲要[EB/OL]. [3]中共中央办公厅.2013－2017年全国干部教育培训 规划[EB/OL]. [4]钟定国.培训效果评估的方法选择[J].中国培训，2003,(3). [5]王学用.我国干部教育培训项目评估研究――以无 锡新区为例[D].上海:复旦大学,2009. [6]财政部干部教育中心.培训创新思维[M].北京:经济 科学出版社,2008.