1、几种常用培训效果评估方法的比较分析。
培训效果评估是企业培训体系中不可或缺的一个重要环节,也是检验培训工作做得好坏的重要手段。它可以使培训管理者明确培训项目、内容、讲师选择的优劣,了解培训预期目标的实现程度,为后期培训计划、培训项目的制定与实施等提供有益的帮助。实践中我们的培训评估主要采用柯氏的四级评估模式(简称4R模式):
1、学习评估:测定受训者的学习收获程度(知识、技能、态度、行为方式等方面)。主要采取考试、现场问答、模拟测试、写心得体会的评估方式等。
2、行为评估:主要考察受训者知识运用程度(培训后,其态度、行为方式的变化和改进情况)。 我们一般通过行为观察、每月考核(主管评价)及员工关键事件盘点等来予以验证。若对于工作心态、管理方式类的培训,我们一般在培训结束时会布置行为转变行动计划表,到时看其行动计划表的实际完成情况等。
3、反应评估:评估受训者的满意程度(对讲师、课程、培训组织等)。 每次培训后都会做一个培训满意度的反馈调查,主要以现场发放调查表的形式来完成,调查表事先精心设计,主要涵盖总体评价、培训课程、讲师授课、培训组织、合理化建议等几个核心的调查内容。当然,这并不是唯一手段,我们还会通过现场观察培训氛围、培训纪律反馈、员工抽样访谈等方式进行补充调查。
4、成果评估:衡量培训带来的经济效益(培训后,受训者在一定时期内所创造的工作业绩增长变化评估)。 是最后评估项,主要是通过绩效考核,更多的是一些量化数据的对比反馈,如质量、销售额、成本、项目效率、人员晋升培养结果等。
另外,在年度培训结束后,我们还会核算整个年度的培训投资回报率的变化情况,考查销售额或利润增量与培训课时和费用增量之间的关系,以此衡量我们年度培训工作的进步情况,尤其会特别关注和核算本年度新入职员工进步的情况。因为,我们觉得培训对新员工的改变和造成的结果影响较大。
评估的方式我们一看就懂,一学就会,难的是让评估的结果和实际的情形最大限度的相符。在专业上我们把它叫做信度和效度。提高信度和效度的有效途径是科学地设计好评价的内容、分数和权重,并控制好实施评价中的全过程
2、如何对企业培训的效果进行有效评估?
1、分析培训需求
进行培训需求分析是培训项目设计的第一步,也是培训评估的第一步。不管一个培训项目是由什么原因引起的,培训项目负责人都应该通过培训需求分析来决定具体的知识、技能、态度的缺陷。培训需求分析中所使用的最典型的方法有访谈法、调研法和问卷调查法。访谈的对象主要集中针对受训人员和他们的上司,同时,还要对工作效率低的管理机构及员工所在的环境实施调查,从而确定环境是否也对工作效率有所影响。 笔者接触过的企业如饮料行业的百事的销售培训、家电行业的美的市场培训、食品日化行业的联合利华管理培训,这些企业的HR或培训负责人,对于培训需求挖掘和把握都非常到位,值得其他企业的借鉴。
2、确定评估的目的
在培训项目实施之前,HR就必须把培训评估的目的明确下来。多数情况下,培训评估的实施有助于对培训项目的前景做出决定,对培训系统的某些部分进行修订,或是对培训项目进行整体修改,以使其更加符合企业的需要。例如,培训材料是否体现公司的价值观念,培训师能否完整地将知识和信息传递给受训人员等。重要的是,培训评估的目的将影响数据收集的方法和所要收集的数据类型。
3、建立培训评估数据库
进行培训评估之前,企业必须将培训前后发生的数据收集齐备,因为培训数据是培训评估的对象。培训的数据按照能否用数字衡量的标准可以分为两类:硬数据和软数据。硬数据是对改进情况的主要衡量标准,以比例的形式出现,是一些易于收集的无可争辩的事实。这是最需要收集的理想数据。硬数据可以分为四大类:产出、质量、成本和时间,几乎在所有组织机构中这四类都是具有代表性的业绩衡量标准。有时候很难找到硬数据,这时,软数据在评估人力资源开发培训项目时就很有意义。常用的软数据类型可以归纳为六个部分:工作习惯、氛围、新技能、发展、满意度和主动性。
4、确定培训评估的层次
从评估的深度和难度看,USYS五级评估包括反应层、学习层、行为层和生意结果层、投资回报率五个层次。培训项目负责人要确定最终的培训评估层次,因为这将决定要收集的数据种类。
反应层评估是指受训人员对培训项目的看法,包括对材料、老师、设施、方法和内容等等的看法。反应层评估的主要方法是问卷调查。
学习层评估是目前最常见、也是最常用到的一种评价方式。它是测量受训人员对原理、事实、技术和技能的掌握程度。学习层评估的方法包括笔试、技能操练和工作模拟等。培训组织者可以通过笔试、绩效考核等方法来了解受训人员在培训前后,知识以及技能的掌握方面有多大程度的提高。
行为层的评估往往发生在培训结束后的一段时间,由上级、同事或客户观察受训人员的行为在培训前后是否有差别,他们是否在工作中运用了培训中学到的知识。这个层次的评估可以包括受训人员的主观感觉、下属和同事对其培训前后行为变化的对比,以及受训人员本人的自评。这种评价方法要求人力资源部门建立与职能部门的良好关系,以便不断获得员工的行为信息。
结果层的评估上升到组织的高度,即组织是否因为培训而经营得更好了?这可以通过一些指标来衡量,如事故率、生产率、员工流动率、质量、员工士气以及企业对客户的服务等。通过对这样一些组织指标的分析,企业能够了解培训带来的收益。例如人力资源开发人员可以分析比较事故率,以及事故率的下降有多大程度归因于培训,从而确定培训对组织整体的贡献。
投资回报层的评估,就上升到生意层面。培训能否对业绩产生帮助。这个评估会相对比较特殊,更多是适合营销相关部门进行评估。比如联想企业就非常重视对终端人员的培训投入,他们针对样板区域的受训学员进行评估,与其他可比性的非受训学员的同类市场进行比对,在其他变量都相同情况下,培训能对终端销量的拉动有多少提升?投入N元在培训的组织和管理上,能带来多少额外的业绩增长。若是ROI合理,则大面积推广相关培训。
5、调整培训项目
基于对收集到的信息进行认真分析,人力资源开发部门就可以有针对性地调整培训项目。如果培训项目没有什么效果或是存在问题,人力资源开发人员就要对该项目进行调整或考虑取消该项目。
6、沟通培训项目结果
在培训评估过程中,人们往往忽视对培训评估结果的沟通。尽管经过分析和解释后的评估数据将转给某个人,但是,当应该得到这些信息的人没有得到时,就会出现问题。也可以通过麦塔软件进行同步测验,在沟通有关培训评估信息时,培训部门一定要做到不存偏见和有效率。
对于有志于做好人才培养的培训人员,踏踏实实的做好培训评估的六个步骤,就能向企业管理层提交一份令人满意的人才培养的答卷。
3、培训需求分析的分析方法
可以用来进行培训需求分析的方法有许多种,在这里主要介绍9种可供选择使用的培训需求分析方法:访谈法、问卷调查法、观察法、关键事件法、绩效分析法、经验判断法、头脑风暴法、专项测评法和胜任能力分析法。1.访谈法这是一种大家都了解的方法,就是通过与被访谈人进行面对面的交谈来获取培训需求信息。应用过程中,可以与企业管理层面谈,以了解组织对人员的期望;也可以与有关部门的负责人面谈,以便从专业和工作角度分析培训需求。一般来讲,在访谈之前,要求先确定到底需要何种信息,然后准备访谈提纲。访谈中提出的问题可以是封闭性的,也可以是开放性的。封闭式的访谈结果比较容易分析,但开放式的访谈常常能发现意外的更能说明问题的事实。访谈可以是结构式的,即以标准的模式向所有被访者提出同样的问题;也可以是非结构式的,即针对不同对象提出不同的开放式问题。一般情况下是把两种方式结合起来使用,并以结构式访谈为主,非结构式访谈为辅。采用访谈法了解培训需求,应注意以下几点:(1)确定访谈的目标,明确“什么信息是最有价值的、必须了解到的”。(2)准备完备的访谈提纲。这对于启发、引导被访谈人讨论相关问题、防止访谈中心转移是十分重要的。(3)建立融洽的、相互信任的访谈气氛。在访谈中,访谈人员需要首先取得被访谈人的信任,以避免产生敌意或抵制情绪。这对于保证收集到的信息具有正确性与准确性非常重要。另外,访谈法还可以与下述问卷调查法结合起来使用,通过访谈来补充或核实调查问卷的内容,讨论填写不清楚的地方,探索比较深层次的问题和原因。2.问卷调查法
这也是一种为大家所熟知的方法。它是以标准化的问卷形式列出一组问题,要求调查对象就问题进行打分或做是非选择。当需要进行培训需求分析的人较多,并且时间较为紧急时,就可以精心准备一份问卷,以电子邮件、传真或直接发放的方式让对方填写,也可以在进行面谈和电话访谈时由调查人自己填写。在进行问卷调查时,问卷的编写尤为重要。
编写一份好的问卷通常需要遵循以下步骤:(1)列出希望了解的事项清单。(2)一份问卷可以由封闭式问题和开放式问题组成,两者应视情况各占一定比例。(3)对问卷进行编辑,并最终形成文件。(4)请他人检查问卷,并加以评价。(5)在小范围内对问卷进行模拟测试,并对结果进行评估。(6)对问卷进行必要的修改。(7)实施调查。3.观察法观察法是通过到工作现场,观察员工的工作表现,发现问题,获取信息数据。运用观察法的第一步是要明确所需要的信息,然后确定观察对象。观察法最大的一个缺陷是,当被观察者意识到自己正在被观察时,他们的一举一动可能与平时不同,这就会使观察结果产生偏差。因此观察时应该尽量隐蔽并进行多次观察,这样有助于提高观察结果的准确性。当然,这样做需要考虑时间上和空间条件上是否允许。在运用观察法时应该注意以下几点:(1)观察者必须对要进行观察的员工所进行的工作有深刻的了解,明确其行为标准。否则,无法进行有效观察。(2)进行现场观察不能干扰被观察者的正常工作,应注意隐蔽。(3)观察法的适用范围有限,一般适用于易被直接观察和了解的工作,不适用于技术要求较高的复杂性工作。(4)必要时,可请陌生人进行观察,如请人扮演顾客观察终端销售人员的行为表现是否符合标准或处于何种状态。4.关键事件法关键事件法与我们通常所说的整理记录法相似,它可以用以考察工作过程和活动情况以发现潜在的培训需求。被观察的对象通常是那些对组织目标起关键性积极作用或消极作用的事件。确定关键事件的原则是:工作过程中发生的对企业绩效有重大影响的特定事件,如系统故障、获取大客户、大客户流失、产品交期延迟或事故率过高等等。关键事件的记录为培训需求分析提供了方便而有意义的消息来源。关键事件法要求管理人员记录员工工作中的关键事件,包括导致事件发生的原因和背景,员工特别有效或失败的行为,关键行为的后果,以及员工自己能否支配或控制行为后果等。进行关键事件分析时应注意以下两个方面:(1)制定保存重大事件记录的指导原则并建立记录媒体(如工作日志、主管笔记等)。(2)对记录进行定期分析,找出员工在知识和技能方面的缺陷,以确定培训需求。5.绩效分析法培训的最终目的是改进工作绩效,减少或消除实际绩效与期望绩效之间的差距。因此,对个人或团队的绩效进行考核可以作为分析培训需求的一种方法。运用绩效分析法需要注意把握以下四个方面:(1)将明确规定并得到一致同意的标准作为考核的基线。(2)集中注意那些希望达到的关键业绩指标。(3)确定未达到理想业绩水平的原因。(4)确定通过培训能否达到的业绩水平。6.经验判断法有些培训需求具有一定的通用性或规律性,可以凭借经验加以判断。比如,一位经验丰富的管理者能够轻易地判断出他的下属在哪些能力方面比较欠缺,因而应进行哪些内容的培训。又比如,人力资源部门仅仅根据过去的工作经验,不用调查就知道那些刚进入公司的新员工需要进行哪些方面的培训;还比如,公司在准备将一批基层管理者提拔为中层干部时,公司领导和人力资源部门不用做调研,也能大致知道这批准备提拔的人员应该接受哪些培训。再比如,在企业重组或兼并过程中,有关决策者或管理部门不用调研,也能大致知道要对相关人员进行哪些方面的培训。采取经验判断法获取培训需求信息在方式上可以十分灵活,既可以设计正式的问卷表交由相关人员,由他们凭借经验判断提出培训需求。还可以通过座谈会、一对一沟通的方式获得这方面的信息。培训部门甚至可以仅仅根据自己的经验直接对某些层级或部门人员的培训需要做出分析判断。那些通常由公司领导亲自要求举办的培训活动,其培训需求无一不来自公司领导的经验判断。7.头脑风暴法在实施一项新的项目、工程或推出新的产品之前需要进行培训需求分析时,可将一群合适的人员集中在一起共同工作、思考和分析。在公司内部寻找那些具有较强分析能力的人并让他们成为头脑风暴小组的成员。还可以邀请公司以外的有关人员参加,如客户或供应商。头脑风暴法的主要步骤如下:(1)将有关人员召集在一起,通常是围桌而坐,人数不宜过多,一般十几人为宜。(2)让参会者就某一主题尽快提出培训需求,并在一定时间内进行无拘无束的讨论。(3)只许讨论,不许批评和反驳。观点越多、思路越广越好。(4)所有提出的方案都当场记录下来,不作结论,只注重产生方案或意见的过程。事后,对每条培训需求的迫切程度与可培训程度提出看法,以确认当前最迫切的培训需求信息。8.专项测评法专项测评是一种高度专门化的问卷调查方法,设计或选择专项测评表并进行有效测评需要大量的专业知识。通常,一般的问卷只能获得表面或描述性的数据,专项测评表则复杂得多,它可通过深层次的调查,提供具体而且较系统的信息,比如可测量出员工对计划中的公司变化的心理反应以及接受培训的应对准备等等。由于专项测评法操作要求极高,并需要大量的专业知识作支撑,企业一般是外请专业的测评公司来进行。然而,使用外部专业公司提供专项测评,会受到时间和经费的限制。9.胜任能力分析
胜任能力是指员工胜任某一工作所应具备的知识、技能、态度和价值观等。许多公司都在依据经营战略建立各岗位的胜任能力模型,以为公司员工招聘与甄选、培训、绩效考评和薪酬管理提供依据。
基于胜任能力的培训需求分析有两个主要步骤:
(1)职位描述:描述出该职位的任职者必须具备的知识、技能、态度和价值。
(2)能力现状评估:依据任职能力要求来评估任职者目前的能力水平。
使用这一方法的企业或培训经理普遍认为,当职位应具备的能力和个人满足职务的实际能力得到界定后,确定培训需求就变得容易了。
最后,运用这些方法分析培训需求时,你需要慎重考虑每一种被使用的方法的具体使用效果:其中的一些方法本身就可能无法得出“全面客观”的结果;而其中的另一些方法则需要你“用到位”才可能产生“全面客观”的结果。
DuDuTalk是武汉赛思云科技有限公司旗下语音数据驱动的AI销售赋能平台。通过智能硬件(IOT)、AI引擎、机器学习、NLP、文本数据挖掘等技术,为企业提供覆盖移动通话、现场沟通等全场景语音采集、识别、质检、分析等服务。让销售与客户互动全过程数字化、可视化、智能化,用科学的方式实现对销售团队的个性化赋能,让每个人都成为“顶级销售”。