四层次评估模型在新疆少数民族科技骨干特殊培养效果
⇨⇦
摘要：新疆少数民族科技骨干特殊培养是经国务院批准，针对新疆少数民族专业技术人员的特殊培养工作。本研究运用Kirkpatrick四层次评估模型，通过实地访谈和问卷调查的方式，对特培工作实施效果进行评价，了解特培工作实施现状，对特培工作改善提出建议，并对培训效果评估有效实施提出改进措施。
关键词：少数民族 特殊培养 效果评价 新疆
一、问题提出
新疆是多民族聚居区，少数民族占全区人口的61.5%。截止2014年底，全区少数民族专业技术人员29.44万人，占全区专业技术人员总数的58.37%。南疆四地州少数民族专业技术人员15.21万人，占南疆专业技术人员总数的80.43%。在各类人才队伍中，少数民族科技人才队伍占有很大的比重。少数民族人才队伍是推动新疆社会发展、经济繁荣以及维护民族团结、社会稳定的重要力量，加强少数民族人才队伍建设事关新疆社会稳定和长治久安的全局。
党中央、国务院和自治区党委、自治区人民政府历来高度重视新疆少数民族人才队伍建设，特别是1992年以来，国家根据新疆的特殊战略地位和人才发展现状，实施了专门针对新疆少数民族科技骨干的特殊培养工作（以下简称＂特培＂），从自治区科研、教育、卫生、工业、农业、信息产业、经济管理等系统，选拔具有较大培养潜力的少数民族中青年科技骨干，安排到有关部委、省市和新疆所属科研院所、大专院校、医疗卫生系统和高新技术企业，进行为期数月至两年的特殊培养。
本研究在分析第四批特培工作实施现状的基础上，运用Kirkpatrick四層次评估模型对特培效果进行评价，并对培训效果评估有效实施提出改进措施，使少数民族特培工作最大限度地发挥其应有的作用，加快新疆少数民族高层次专业技术人才培养，推动少数民族地区社会经济的可持续发展。
二、调查对象与数据收集
截止2014年，全疆共派出第四批特培学员1378人，分别来自科教文卫等多个行业，本次调研，调研组深入乌鲁木齐、昌吉以及阿克苏地区，走访了11个调研单位，组织了各种类型的访谈42次，收回有效调查问卷共计122份。
三、调查结果
Kirkpatrick评估模型主要以受训学员作为评估效果的对象，根据评估对象的活动状况，分别从反应层、学习层、行为层和结果层四个层级对培训效果进行评估。
1.反应层评估
反应层评估，主要评估学员对培训的满意程度，具体指受训者对培训内容、授课教师、培训方式方法以及培训管理和保障等的反应，是受训者在接受培训后对培训活动的各种主观感受，结合所有人的总体反应得出对培训效果的基本评价。反应层评估指标主要有培训满意度指标、培训组织指标、课程内容指标、培训导师指标、培训保障指标等。
学员们根据自己对所接受培训的实际感受，采用李克特五点量表，分别从以上几项反应层评估指标报告自己的满意程度。将学员对各方面的满意度评定分数进行加权平均，得出学员对反应层各项指标的分值。
由表1可以看出，学员对特培的总体满意率为76.2%，特培项目达到了预期的目的。84%的学员认为特培的组织管理较好，可见，特培的组织管理情况得到了大部分学员的认可。63.1%的受训学员认为课程内容设计合理，说明特培课程在设计上较完善的考虑了受训学员的培训需求。学员不满意的原因反映在部分课程理论性过强，与实践工作结合不紧密。以课堂讲授为主的授课形式缺乏与导师之间的互动。学员建议采用多样化的授课方式，如讨论、参观、实习等，将理论与实践相结合，增强学员的参与度。89.4%的学员对特培导师的教学水平表示认可，学员认为大部分导师专业水平高、研究能力强，并且乐于分享资源，在导师的指导下自己的专业能力得到了提高。对导师教学水平表示不满意的学员反映少数导师对特培学员不重视，加之自身工作繁忙，对于学员的指导和关心不够。调查当中发现，绝大部分少数民族科技骨干有着强烈的更新知识结构和提高自身素质的诉求，因此84.4%的学员表示如果有机会愿意再次参加特培项目，并希望自己反馈的问题和提出的建议能够帮助特培工作的改进。
得分相对较低的项目是生活条件以及经费保障，通过访谈了解部分培养单位提供的住宿条件较差，有些是设施简陋，有些是交通不便。另外，部分学员对培养经费的使用及保障情况不是很了解。
2.学习层面评估
学习层面评估，主要测评受训学员通过培训学到了什么，即评估学员学到了哪些知识、学员掌握或提升了哪些技能、学员在哪些态度上发生了转变。它是从受训者的角度通过对培训内容（包括原理、知识、技能、态度等）的掌握水平来反映培训绩效情况的。学习层评估指标主要有学员对知识的掌握情况指标和学员对技能的掌握情况指标。
特培学员在知识和技能方面的提升如表2所示，受访的学员中106人次认为专业技术水平有提升，比重达86.9%；89人次认为自己的业务能力有提升，比重达73.6%；81人次认为特培有助于转变观念、开拓视野，比重达66.4%。从调查结果看，特培学员在专业知识与技能方面不同程度的得到了提高。
另外，从学员提交的特培学习心得中了解到，大部分学员认为此次培训满足了自己的工作和学习需要，较大程度地帮助了自己开展本职工作。部分学员认为此次培训开拓了视野，部分学员认为此次培训对自己与国内先进技术水平以及学术前沿接轨起了较大的作用，同时对今后特培组织管理的诸多环节提出了建设性意见。
3.行为层评估
行为层评估，反映受训学员将知识、技能运用和发挥在工作岗位上并提高工作绩效的程度，用以判断所学知识、技能对实际工作的影响。
对于行为层评估，采用抽样访谈的形式。随机抽取各单位特培学员作为评估对象，对受训学员的直接上级以及人事部领导进行了访谈。访谈的主要内容包括学员参加特培后，其工作态度、汉语水平、团队合作意识、科技论文写作、科研项目申报等几方面的改变情况。访谈中了解到，一些学员的工作态度发生了变化，比以前更加刻苦敬业，思想政治水平有了显著提高；一些学员的汉语水平明显提高，使用汉语进行日常沟通和工作交流都更加得心应手；一些学员管理水平得到提升，团队合作意识明显增强；有些学员的科技论文写作以及科研能力得到提升，积极申请科研项目并且中标率较高。
4.结果层评估
结果层评估，将评估上升到组织的高度，即判断培训对受训者所在组织的改善是否起到一定的作用。
在走访的地区和单位中，特培学员在所在单位和当地产生了良好的示范带头作用。被调查的122名第四批特培学员学成后，共承担课题44项，其中国家级9项、省部级15项、地厅级20项；发表论文234篇，其中核心期刊132篇，非核心期刊102篇；科研成果获国家级奖项2人、省部级奖项4人、市县级奖1人（见表3）。
四、培训效果评估有效实施的改进措施
1.加大组织支持力度
特培项目的有效实施以及实施效果的评估有赖于各部门主管的支持，组织支持是一个持续的过程，贯穿于培训的各个环节，组织支持可以说是培训活动成功的关键因素。为获得组织的支持和领导的重视，应及时将培训的显著成效反映给各部门领导，需要用有说服力的量化数据来增加组织对项目的信心并给予持续的支持，这将进一步提高培训效果评估的准确性，为评估争取所需资源。
2.选擇合适的评估者
作为特培评估的主体，如何选择合适的评估者是开始培训效果评估之前需要慎重考虑的问题。通常可以将评估者分为内部评估者和外部评估者，内部评估者隶属于组织内部，可以由选送单位领导、培养单位主管人员、人社厅负责人组成。外部评估者主要来自组织之外，如科研机构、大学和咨询公司等。内外部评估者具有各自的优缺点，内部评估者相对更了解项目特点和实施情况，但是容易在评估过程中加入个人感情，影响评估结果客观性；外部评估者掌握较为专业的评估技术和方法，立场中立，但是需要一定时间了解项目内容。在选择评估者时应考虑特培项目本身的特点、评估目的等诸多因素，必要时可采用内外部评估相结合的方式。
3.合理反馈培训效果评估结果
对培训效果评估结果进行反馈是推进评估结果实施的重要环节，通过向不同参与主体及时合理反馈评估结果，达到改进和调整项目实施的目的。
反馈给培养单位，培养单位可以根据学员的意见反馈，对课程内容和培养方式进行调整，以便更好地满足学员需要，以此不断改进培养工作质量。反馈给特培学员，使他们了解培训的效果，体会培训前后自己各方面的变化和业绩表现，有助于充分发挥培训所学，进一步提升自我，同时也为下一批特培学员做出示范。反馈给特培学员的单位领导，他们是培训效果体现的直接观察者，有切身的感受，能够比学员更加客观的评价培训项目的价值，因此他们对评估结果的跟踪反馈是非常重要的。反馈给人社厅，人社厅负责人主要通过培训效果评估结果了解培训投资回报情况，培训效果评估结果也是调整培训相关政策的重要依据。及时的信息反馈，能够促进管理部门和选送单位对特培项目的了解和重视，能够调动特培学员的积极性，不断提高自身素质和工作水平。
4.完善培训评估制度
（1）建立正式有效的沟通机制。由于特培项目涉及到多个部门，因此培训效果评估过程要得到各部门的一致认同和坚强的执行力还需要加强合作与交流。自治区人社厅、选送单位、培养单位以及学员之间应保持密切联系，及时交流培训情况。人社厅应积极了解不同工作领域学员的具体培训需求，尊重学员对于培养单位的选择；选送单位应与学员和培养单位定期交流，及时发现问题，提出建议；培养单位应充分了解选送单位的工作需要以及学员的自身诉求，有针对性地设计和调整培养计划。各部门间的定期沟通交流可通过多样化的渠道提高沟通效率和有效性，如电视电话会议、电子邮件、内部网络平台等。
（2）建立并完善绩效考评制度。绩效考评不但可以发现和找出培训需求，据此制订培训措施与计划，还可以检查培训效果，有助于提高培训效果评估工作效率和质量。不仅要对特培学员进行绩效考核，还应将特培工作与选送单位和培养单位的绩效考核挂钩。对工作突出的选送单位和培养单位进行嘉奖，并作为典型进行经验分享，对存在问题的相关单位提出整改意见。
（3）建立科学、有效的数据收集系统。数据收集系统的建立是开展培训效果评估必不可少的工作之一，是项目基础管理的重要组成部分。特培项目的反馈结果应及时归档整理，完整记录和保存评估过程中收集的原始数据资料以及分析结果等，并建立一个信息系统，以便于今后的查找分析，为以后的培训工作提供支持。