气象干部教育培训效果研究

开展干部教育培训效果评估的主要目的是改善教育培训的管理与实施水平，提高培训质量。培训效果评估是加强教育培训管理的必要手段。开展干部教育培训效果评估必然要有指标体系，当培训效果评估逐步常规化、制度化以后，评估指标体系便会自然成为一种制约要素，对后续培训工作的开展产生规范、限制作用，使培训管理更加科学化、规范化、机制化，从而有效保证干部教育培训的质量。培训评估技术通过建立培训效果评估指标及评估体系，对培训是否达到预期目标、培训计划是否具有成效等进行检查与评价，然后把评估结果进行反馈，作为下一步培训计划与培训需求分析的依据之一。

一、培训效果与效果评估概念

培训效果主要是指培训学员知识的获得、能力的提高、态度的改变、工作绩效的提升等。培训效果评估是指针对特定的培训活动，系统地搜集资料并给予适当的评价，以作为筛选、采用、修改培训计划等的决策判断的基础。要求通过不同的评测方式评价培训目标的达成度，并据此判断培训的有效性。培训效果评估是一个完整的培训流程的最后环节，它既是对整个培训活动实施成效的评价与总结，同时评估结果又是以后培训活动的重要依据，为下一个培训活动确定培训需求提供了重要信息。运用科学的方法和程序获取培训活动的系统信息，培训效果评估能够帮助项目决策者作出科学的决策，提高培训项目的管理水平，并确保培训活动实现计划所制定的目标。

二、培训效果影响因素理论

1.诺伊模型。该模型解释了个人及组织因素对于学员动力的影响，动力被认为是影响培训效果的重要因素。该模型代表了一种纵向的、程序导向的观点，同时它侧重于组织内部的培训。模型中提出了两个核心动力因素：学习动力及转化动力。2.Kirkpatrick“四级评估模型”。美国威斯康星大学（WisconsinUniversity）唐纳德•柯克帕特里克（DonaldL.Kirkpatrick）对培训效果评估方法进行研究，提出了四级评估模型，它包括反应层级评估、学习层级评估、行为层级评估、结果层级评估。反应层级评估是指受训者对培训项目的评估，主要是通过让受训者回答一系列与培训相关的问题，如对培训材料、培训教师、培训设备、培训方法等进行评估，得到第一手资料，并进行数据分析。受训者反应评估是培训效果测定的最低层次，也是培训评估指标体系需要考虑的重要因素。学习层级的评估是测量原理、技术和技能获取程度，通过书面测试、实际操作和技能练习等方式测定受训者与受训前相比是否掌握了更多的知识和技能。行为层级是评估受训者在培训项目中所学习的知识、技能在回到工作岗位后的转化程度，培训的相关内容是否被应用于他们日常的工作实践中，工作行为有没有得到改善。培训工作是否取得预期的效果，关键在于工作后受训者的表现。这方面的内容可以通过受训者的上级、下属、同事和本人对培训前后的行为变化进行比较，得出评估结论。结果层级评估的目的是评估培训是否有助于组织绩效的提高，主要从上级部门和管理者的角度出发，设计一系列指标，衡量该培训项目是否有助于整个组织绩效的提升，如提高组织凝聚力、提高效率和保证质量等。

三、现行气象干部培训效果

评估存在的主要问题1.评估理念错位。主要表现在两点：一是没有认识到评估工作是气象干部教育培训整个环节的一部分，对培训的效果、质量没有一个明确的认识，也没有认识到评估对于提高教育培训质量和水平的重要性；二是把评估理解为对教学的评估而不是对效果的评估，在评估的过程中只对教学内容、教学方式、师资力量、学员学习成绩、后勤保障等进行评估，而对学员返回单位后知识体系和技术能力的应用没有评估。2.评估主体单一。目前气象干部教育培训的评估主体由两部分构成。一是气象干部教育培训主管人事部门，根据《干部教育培训工作条例（试行）》的规定，教育培训主管人事部门承担着培训评估的主要职责，但在实际操作中，由于时间、精力、获取信息等多方面的原因，气象教育培训主管人事部门很少对培训效果进行评估；二是干部教育培训机构进行的自我评估，由于既承担着运动员又承担着裁判员的角色，很难客观地进行评估。评估主体的单一性和垄断性，使得评估结果缺乏真实性和客观性，评估结果很难反映出培训效果的真实状况。3.评估内容不全面。现行气象干部培训效果评估工作侧重于反应层级和学习层级的评估，而缺失对行为层级的评估。正由于对行为层级评估的缺失，导致对结果层面的评估不充分、不可靠。要有效开展培训前的诊断评估，培训中的监控评估，培训后的结果评估，从而全面反映培训的效果。4.评估指标体系不健全。到目前为止，气象干部培训还没有建立起一套完整系统的评估指标体系，现有的一些评估指标体系主要存在以下问题：一是照搬套用学历教育的教学评估指标体系，针对性不强；二是评估指标体系过于简单，不完善，操作性不强，反馈信息价值不大；三是指标体系只是定性评估，缺乏定量评估，信度、效度不高，科学性不足。5.评估结果没有得到有效运用。一是缺乏评估的反馈路径，把评估当做一种任务来完成，一评了之，将结果束之高阁，既没有对评估结果进行有效的分析，也没有及时把评估结果向教育培训主管部门、学员和送培单位进行反馈；二是培训评估与改进工作联系不够密切，评估中出现的问题没有在以后的教学培训中加以改进，一些教学中存在的问题没有得到及时解决；三是培训评估的结果并没有与干部的晋升、转岗、工资待遇等挂钩，结果的好坏对干部发展没有影响，干部参与评估的积极性不高。

四、构建气象干部教育培训效果评估机制模型

1.创新评估理念，主管部门推动。

教育培训质量是气象干部教育工作的核心，对培训质量进行效果评估、助力气象培训机构提升办学水平，是气象干部教育主管人事部门的重要使命。建立科学的教育培训效果评估体系和机制，并在实践中贯彻落实，是督促、引导气象培训机构教育培训质量提升的必要举措。作为保障教育培训质量的一个重要手段，对气象干部教育培训效果评估机制进行创新与改进，使之既体现出科学的引领价值，又从实际出发，为有效开展新时代气象干部教育培训工作奠定扎实基础。气象干部教育主管人事部门要着力推动相关工作，可在广泛调研和征求意见的基础上制定相关规定，对干部教育培训效果评估工作进行统筹安排，对评估的基本任务、基本原则、关键指标、一般方法、结果运用等提出原则性的指导意见，启动干部教育培训效果评估试点工作，先干起来再总结经验逐步完善和推广。

2.明确评估主体，分级分类实施。

评估主体解决的是“由谁评估”的问题，对于任何一个评估主体而言，由于自身特定的评估视角和认知态度不同，具有其自身优势与局限。对于气象干部教育培训而言，其培训效果评估主体包括：组织人事部门、具体培训机构、培训学员所在单位、受训学员。气象干部培训是干部工作的重要组成部分，作为干部培训的管理机构和协调机构，组织人事部门扮演着组织者和规划者的角色，应该统领全局，协调评估主体，把握评估的整体方向。气象部门的培训机构包括气象干部培训学院及其各分院、各省气象局培训中心和部分高等院校等。由于培训机构是负责气象干部教育培训工作的具体实践者，他们不仅要进行新理论的教育、新政策的导读、新知识的传播和新技术的推广等，而且要在培训过程中提供多种服务，如负责制订教学培养方案、授课教师的选聘与考核、教学过程监控、成绩考核评定等教学管理工作，其管理的方式、方法及运作程序对干部培训效果的优劣起着至关重要的作用。培训学员所在单位按照组织人事部门的相关规定，派遣本单位干部进行培训，培训结束后受训人员回到各自工作岗位，他们的工作最终会对所在单位的组织绩效产生影响。因此，需要培训学员所在单位参与到干部培训效果评估工作中来，作为多元评估主体之一进行评估。受训学员作为培训效果的评估主体，是整个干部培训活动的亲身体验者和直接受益者，作为接受培训的对象，在不同的施教机构接受各种不同方式、不同内容的培训，通过一段时间的学习后，受训学员对培训的质量和效果都会产生直接的信息反馈，他们无疑是最直接、最客观的评估主体。不同身份的评估主体亦有自身难以克服的评估局限，这些优势和局限性都会对评估效果的有效性产生强烈影响。因此，需要培育和完善多元化的干部培训效果评估主体，使之达到互补的作用。结合以上四个气象干部培训效果评估主体的特点，充分发挥各自优势，分级分类实施效果评估工作。

3.优化指标体系，完善评估内容。

充分发扬民主，通过广泛收集、调查分析、归类合并、确定权重等步骤，选定评估指标，形成科学合理的指标体系。优化气象干部教育培训效果评估指标体系，体系设置组织领导、教学师资、受训学员、班级管理、后勤保障等6个一级指标、8个二级指标和22个三级指标。依据该体系，评估主体可以采取现场查看、问卷调查、召开座谈会、跟踪调查、查阅资料等方法，从五个方面对拟考察班型进行综合评估。严格规范把握评估运作程序。评估指标体系建立后，应根据每项指标量化分值，系统考核，分步实施，层层推进，做到“横不漏项，纵不断档”，保证评估结果客观公正。完善气象干部教育培训效果评估的内容，其内容主要包括对培训计划和方案的合理性评估，对课堂教学效果、学员学习情况和教学管理状况的评估，对学员培训结束后在工作中各项表现的评估。对培训计划和方案的合理性评估是在培训前，由组织人事部门对培训实施单位的培训计划、方案进行总揽性的评估，并提出建议和意见，主要掌握组织人事部门对实施培训的单位提出的培训方案满意程度。采取的评估方式是培训单位上报培训计划和方案，由组织人事部门组织相关领导、专家审阅，提出完善方案的建议和意见，有关培训实施单位对培训计划和方案进行修改和完善。对课堂教学效果、学员学习情况和教学管理状况的评估是在培训的过程中，要对教师教学效果、学员学习情况、教学管理状况三个方面进行评估。对学员培训结束后在工作中的各项表现的评估是在培训结束后，要考察学员在工作中的各项表现情况。一是通过对学员所在单位进行问卷调查和访谈，向学员所在单位的领导和同事发放调查问卷，了解学员培训后在思想品质、工作态度、分析解决问题能力等方面的变化。二是考察学员培训后在单位的个人贡献及工作成效等。此项评估可以从参训学员中有针对性地抽取一定数量学员作为考察样本，适当减少工作量，便于评估工作的顺利开展。

4.采用信息技术，运用评估结果。

与时俱进，不断创新，广泛运用信息技术和互联网技术，提高评估过程效率，增强评估结果可靠性。气象干部教育培训效果评估过程中，运用金数据网络在线表单工具，快速创建问卷调查、意见反馈、信息登记、考试测评等表单，并自动收集整理数据，生成数据报表，获得数据结果反馈等。在评估培训后回访反馈时，可以运用气象部门现有的全国Notes办公自动化网络平台资源，建立有效而规范的联系渠道。干部教育培训机构评估结果只有运用起来，才会有价值、有意义。评估结果要向培训机构反馈，这样才能形成一个评估的闭环系统，把评估结果转化为推动培训机构改进和完善培训工作的有效激励。要高度重视评估结果，强化评估结果运用。一是建立培训质量评估档案。将评估表和评估报告归档保存，保存期不少于5年，为进一步加强和改进培训办班工作提供依据。二是建立评估结果反馈机制。及时将评估结果反馈给承办培训机构和授课教师，督促综合评估不合格或课程评估不合格的相关单位分析存在的问题并进行整改，以提高培训质量。三是建立培训评估结果备案机制。培训主办单位申报下年度培训计划时，将本年度所举办的各期培训班的质量评估情况上报上级培训主管单位，作为确定其下年度培训计划的依据和参考。四是建立激励约束机制。对学员反映较好、培训质量较高的干部教育培训机构，在培训任务安排上予以优先考虑及相关政策支持。对评估中发现的问题，由培训主办方或培训承办方主管部门督促培训承办方改进完善。评估结果的公布不应意味着评估工作的结束，反而正是评估工作深入延展的开始。应将当前的培训结果与后续培训目标的设置结合起来。既要关注当期培训效果的评估，又要关注它对后期培训的指导意义。只有对培训评估结果善加应用，才能真正发挥培训评估的功能，切实促进气象干部教育培训整体质量的提升。

作者:陈刚黄冠军单位:1.中国气象局气象干部培训学院湖南分院 2.湖南省郴州市气象局