人员培训与开发第5章-培训效果评估与培训成果转化.ppt

人员培训与开发第第5 5章章 培训效果评估培训效果评估与培训成果转化与培训成果转化学习目标理解培训效果与培训评估的含义、培训评估目的及在培训流程中的作用；了解评定培训的效度的四种类型、培训评估的分类及如何进行评估培训之前的可行性分析；了解多种培训评估模型；掌握培训方案设计方法、培训评估的数据类型与培训评估信息收集方法；掌握培训效果的分解方法、两种衡量方法与如何进行培训的投资回报分析；掌握培训评估流程；理解培训转化的含义、同因素理论、激励推广理论和认知转化理论三种培训迁移理论的主要内容；理解培训转化的四个层面、培训迁移过程的模型以及受训者特点、培训项目的设计、工作环境对培训转化的影响。3/54主要内容5.1 培训评估概述5.2 培训评估的模型5.3 培训评估方案的设计及信息收集5.4 培训的投资回报分析5.5 培训评估的流程5.6 培训效果转化理论5.7 培训效果转化过程及其影响因素4/545.1 培训评估概述5.1.1培训评估的含义培训效果是指企业和受训者从培训当中获得的收益。培训评估是一个系统的搜集有关人力资源开发项目的描述性和评判性信息的过程，其目的是有利于帮助企业在选择、调整各种培训活动以及判断其价值的时候做出更明智的决策。是对前期活动的总结，也是之后培训活动的输入存在的问题由组织者进行培训，往往难以客观培训评估结果难以使用，并未充分发挥指导之后培训的作用 5/545.1 培训评估概述5.1.2培训评估的作用培训评估环节在人力资源部获得开发资源、支持以及成功营销推广培训项目等过程中起着重要作用:有利于人力资源开发项目的营销和推广：使管理层认识到培训的重要作用，进而支持培训工作。能为决策提供有关培训项目的系统信息，从而做出正确的判断：长期培训、系列培训中止or继续 有利于改进和优化培训体系：发现培训课程、内容、方式方法存在的问题，加以改进 可使培训管理资源得到更广泛的推广和共享：促进各方关注培训活动；使受训对象清楚进步和差距，增强参训愿望。可以促进培训管理水平的提升：发现培训组织过程中的不足加以改进6/545.1 培训评估概述5.1.4培训评估的类型 按评估方式分类非正式评估：依据评估者的主观感受来判断。优点在于不会给受训者造成压力；可以准确发现受训者变化；方便易行、成本低正式评估：根据评估方案、测度工具、评判标准进行评估，尽量剔除主管因素，提高评估信度。优点在于评估更有说服力、更易形成书面报告。9/545.1 培训评估概述5.1.4培训评估的类型 按评估目的分类建设性评估：培训过程控制的评估，是一种主观的非正式评估，主要在于发现培训中的不足加以改进总结性评估：是正式的、客观的、终局性的评估，主要是衡量培训课程的效果、效率、价值或贡献。只能用于决定项目的生死，而不能作为改进的依据；只能决定是否给受训对象某种资格，而无助于培训对象学习状况的改进。结果评估：培训后评估员工是否获得了培训目标所列的知识技能证实评估：定时搜集分析资料，检验培训课程的持续效果终极评估：评估学员将所学应用于工作的程度，不仅针对学员学习课程的效果，还针对所学应用于组织营运的整体绩效。10/545.1 培训评估概述5.1.4培训评估的类型 按评估时间分类即时评估：培训结束时就进行评估，与受训前比较，检验培训成效。重点在于评估受训者学识、技能有无增进、增进程度。滞后评估：培训结束后回到工作岗位上再进行评估，目的在于评估所学应用于工作的情况，如工作态度有无改变、工作效率有无增进等按评估内容分类对学习状况的评估、对教学效果的评估、对教材质量的评估、对培训管理的评估、对知识转移应用的评估等。11/545.1 培训评估概述5.1.5培训评估可行性决策一是确定培训项目是否应该进行评估；二是了解培训项目实施的基本情况，为以后评估工作确定基本的程序和框架。必须评估必须评估不宜评估不宜评估培训项目经费超过一定警戒线培训目标不明、无评估标准项目需三个月或更长时间培训评估结果得不到利用、对后续工作影响不大；或评估者动机不纯项目确定的受训面广培训所需资源不足培训对企业而言十分重要时间有限，无法进行全面科学评估或培训效果显现有较长延期一个部门培训对其他部门影响大企业面临一些列重大改革，需要培训评估结论做依据12/545.2 培训评估模型在什么层面、以什么标准对培训效果进行评估。框架培训评估标准培训评估标准 1.柯克帕特里克2.CIPP模型 3.CIRO模型4.Brinkerhoff5.系统方法6.Kraiger7.考夫曼8.Holton9.菲利普斯四个层次：反应、学习、行为和结果四个层次：内容、输入、过程和产品上下文、输入、反应和结果六个阶段：目标设定、项目设计、项目实施、直接结果、中间或应用结果以及影响与价值四种活动的组合：输入、处理、输出和结果将学习结果细分为三类（认知的、基于技能的、情感的），并针对每种结果给出了适当的评估标准。五个层次：启动和反应、获取、应用、组织输出和社会成果确定了五类变量及它们之间的关系：次要的影响、激励因素、环境因素、结果和能力因素五个层次：反应和有计划的行动、学习、将学习应用于工作、商业结果和投资回报率13/545.2.1柯克帕特里克的培训评估模型认为评估者必须回答四个方面的问题，才能科学评估一次培训活动。受训者的反应：受训者满意度，以采访、问卷的方式获得受训者对培训项目的评价，只能反应受训者对培训过程、培训活动的满意度，不直接涉及培训是否达到预期目标学习层面：知识、技能、态度、行为方式的收获，通过笔试、技能练习、工作模拟等形式测量受训者对知识技能的获得程度，可以评估受训者所获知识技能是否有实践性。行为层面：工作中行为的改进，通过参与者上下级、同事及其本人对参训前后行为变化进行评价，测量培训中所学知识技能的转化程度。结果层面：受训者获得的经营业绩，通过对比培训前后评估绩效改善情况，如节省成本、质量等。5.2 培训评估模型14/545.2.1柯克帕特里克的培训评估模型5.2 培训评估模型层次层次内容内容可询问的问题可询问的问题衡量方法衡量方法反应层观察学员的反应学员喜欢该培训课程？课程对自身有用吗？对培训师及培训设施等有何意？课堂反应是否积极主动？问卷、评估调查表填写、评估访谈学习层检查学员的学习结果学员在培训项目中学到了什么？培训前后，学员知识、技能等方面有多大程度的提高？评估调查表填写、笔试、绩效考试、案例研究 行为层衡量培训前后的工作表现学员在学习基础上有无改变行为？学员在工作中是否用到培训所学的知识、技能？由上级、同事、客户、下属进行绩效考核、测试、观察和绩效记录结果层衡量经营业绩变化行为改变对组织的影响是否积极？组织是否因培训而经营的更好？考察事故率、生产率、流动率、士气 15/545.2 培训评估模型5.2.2考夫曼的五层次评估模型相比帕克帕特里克的变化：一是认为培训能否成功，培训前的资源至关重要，需要评估；二是培训不仅对组织自身产生影响，对组织所处的环境也会产生影响，并给组织带来效益，即社会和顾客的反应。评估级别与项评估级别与项目目内内 容容对应帕克帕特里克对应帕克帕特里克5社会效益社会与客户的反应、结果与报偿情况4组织效益对组织的贡献情况结果层3应用组织中的个人与小组应用的情况行为层2掌握个人与小组的掌握情况学习层1b反应1a可能性方法、手段和程序的接受情况与效用情况，人、财、物力的有效性、可用性和质量反应层16/545.2 培训评估模型5.2.3 CIRO评估模型Contextual，情景评估：实质上是进行培训需求分析，即获取和使用当前情景信息来明确培训需求和培训目标。包括三种目标，最终目标是组织可以通过培训克服或消除特别薄弱的地方；中间目标是为了实现最终目标要求员工工作行为的改变；直接目标即为了实现中间目标员工必须获取的新知识、技能。Input，投入评估：获取和使用可能的培训资源来确定培训方法。Reaction，反应评估：参与者对培训活动的主观评价。Outcome，结果评估：包括四个阶段，即界定趋势目标、选择或构建这些目标的测量方法、在合适的时间进行测量、评估结果以改善后续培训。17/545.2 培训评估模型5.2.4 CIPP评估模型包括情景评估，context evaluation；投入评估，input evaluation;过程评估，process evaluation；成果评估，product evaluation。情景评估有助于形成目标，投入评估帮助计划培训项目，过程评估引导培训实施；结果评估有助于回顾决策。评估层次评估层次 内内 容容.情景评估主要是确定培训需求、机会和目标。.输入评估主要是确定培训方案计划及资源的使用方式。.过程评估主要是培训方案的监督、控制及反馈。.成果评估衡量培训目标达到的程度。18/545.2 培训评估模型5.2.5 菲利普斯投资回报率评估模型增加了财务回报评估，即投资回报率。层层 次次评评 估估 内内 容容1.反应和既定的活动2.学习3.在工作中的应用4.业务结果5.投资回报率评估受训者对培训项目的反应以及略述实施的明确计划评估受训者技能、知识或观念的变化评估受训者工作行为的变化以及对培训资料的确切应用评估培训项目对业务的影响评估培训结果的货币价值以及培训项目的成本19/545.2 培训评估模型5.2.5 菲利普斯投资回报率评估模型第一层级：反应和既定的活动，即测量学院的满意度以及培训项目计划的实施情况。但是，良好的意见反馈并不意味着学员学到了新的知识和技能。第二层级：学习，即检验学员在培训中所学的内容，评估学院知识、技能和观念的变化。但是，这一层级的正面结果并不能保证其在工作中都得到应用。第三层级：工作应用，即评估学院是否将培训内容在工作中应用。但是，应用并不见得一定产生积极影响。第四层及：业务结果，评估学院运用知识后对组织业绩的影响情况，如产品、质量、客户满意度等。第五层级：投资回报率，即培训项目所带来的货币利润与其成本进行比较。20/54培训评估设计非实验设计实验设计 有无 参照组 无 有，是否按随机原则产生是 不是 准实验设计5.3 培训评估方案的设计及信息收集5.3.15.3.1评估方案的设计评估方案的设计 21/541）单组后测设计 X T22）单组前测/后测设计 T1 X T24）所罗门四组设计 组 1（R）T1 X T2 2（R）T1 T2 3（R）X T2 4（R）T25）时间序列设计 T1 T2 T3 T4 X T5 T6 T7 T83）前测/后测控制组设计 实验组（R）T1 X T2 控制组（R）TI X T2同时考察培训和测验是否会影响结果22/545.3 培训评估方案的设计及信息收集5.3.25.3.2硬数据与软数据硬数据与软数据硬数据：客观、易测量和量化，容易转化为货币价值软数据：主观、难以测量和量化定量定性 硬数据 软数据 质量产量成本时间工作习惯新技能氛围发展满意度主动性23/545.3 培训评估方案的设计及信息收集5.3.3评估培训效果的方法定性评估：评估者在调查研究、了解实际情况之后，结合自己的经验与标准，对培训效果做出评价，主要是对实施效果做出方向性的判断。优点是可以重发发挥评估者经验，对不能定量化的指标进行评价；缺点是容易受到主观因素、理论水平、实践经验的影响。问卷调查法：问卷调查法：用于收集受训者对于培训项目效果和有用性的反应，如培训内容针对性、培训师水平、培训设施、自己收益等的评价。优点是便于实施，缺点是受主观影响大，受被测者测试时情感的影响。24/545.3 培训评估方案的设计及信息收集5.3.3评估培训效果的方法定性评估：笔试（测验）法：笔试（测验）法：通过笔试的方法对培训者参训前后的知识、技能进行测验，了解其提高程度。但是测试可能会给被测者带来威胁感，影响测试结果的真实性，且有时候测验分数与工作绩效可能不相关。工作绩效考核法：工作绩效考核法：培训项目结束后，每隔一段时间对员工工作绩效，如工作量有无增加、工作能力有无提高、人际能力有无增强等方面进行评估以了解培训效果，如360反馈评价、工作记录法等。工作态度调查表：工作态度调查表：在培训期间和培训后用同样的调查表对受训者的工作态度进行调查，并进行比较，获取受训者态度有无变化的信息进行评价。25/545.3 培训评估方案的设计及信息收集5.3.3评估培训效果的方法定性评估：工作标准评价法：工作标准评价法：通过了解受训者在工作数量、工作质量、工作态度等方面是否达标来判定培训工作的效果。跟踪观察法跟踪观察法：评估者在培训结束后亲自到受训者的工作岗位上通过仔细观察、记录受训者在工作中的业绩，并进行比较来衡量培训的作用。这种方法花费时间较多、而且搜集信息时可能会打扰当事人造成搜集信息不准确。比较法：比较法：是一种相对评估法，一种是纵向比较，即比较受训者受训前后的情况；另一种是横向比较，即比较受训者与未参加培训的员工。26/545.3 培训评估方案的设计及信息收集5.3.3评估培训效果的方法定性评估：目标评价法：目标评价法：在培训结束后将受训者的实际表现与制定培训计划时设定的目标相比较，来判定培训工作的效果。面谈法面谈法：直接与受训者面谈了解其在人格、行为特征、学习程度、工作能力与绩效方面的变化。征询意见法：征询意见法：调查或询问受训对象的领导、下属，了解他们对于受训对象前后表现的评价。但是这一方法必须考虑到受访对象意见的客观性、公正性。27/545.3 培训评估方案的设计及信息收集5.3.3评估培训效果的方法定量评估：使用较多的是成本-收益分析法计算培训收益：计算培训收益：培训所获得的总效益减去总成本之后所得到的净收益。投资回报率投资回报率（见5.4）28/545.4 培训的投资回报分析评估工具评估目的评估时间评估水平收集数据分解培训效果将数据转换成货币计算投入回报识别无形价值计算培训成本杰克杰克.J.J.菲利普斯的菲利普斯的ROIROI评价过程评价过程 将培训成效转换为具体的货币价值来展示培训效果，步骤如下：29/545.4 培训的投资回报分析5.4.1对培训项目的效果进行分解并不是所有知识、技能、行为、结果的改变都是由培训带来的，因此要精确地对培训项目的投资回报进行评估，就必须先进行效果分解。采用的方法包括：使用参照组使用参照组：比较受训和未受训小组的效果。但是，完全相同的两组是无法找到的；控制组与实验组之间的传染问题，控制组可能会模仿实验组；两组也不可能在完全相同的环境和地点，也会影响测量结果。使用趋势曲线使用趋势曲线：即利用过去的绩效数据绘制一条趋势线，培训结束后将实际绩效与趋势线预测的绩效比较，用以评估。该方法操作简单、成本低，但是在获取数据方面面临困难。30/545.4 培训的投资回报分析5.4.1对培训项目的效果进行分解主观分解法：主观分解法：即由参与者、主管、管理层、专家、下属等对受训者绩效变化进行分解，评价培训效果。方法的选择需要考虑可行性、准确度、时间资金成本、对正常工作的干扰等。31/545.4 培训的投资回报分析5.4.2将收益估计转变为货币的步骤关注绩效度量单位：生产产品数量、销售量、服务质量（出错率、次品率、缺陷率等）确定每单位价值：为上一步选定的单位赋予价值额（V）计算绩效改进数据：将其他影响因素分离，确定直接归功于培训的绩效变化确定绩效变化的年度数值（P）计算绩效改进总价值（P*V）32/545.4 培训的投资回报分析5.4.3培训投资成本核算培训成本分为直接成本及间接成本。直接成本为明确可计算成本。直接成本包括参与培训的所有的雇员（复训者、培训教师等）、咨询人员和项目设计人员的工资和福利；培训使用的材料和设施费用；设备或教室的租金或购买费用、交通费用。间接成本是与培训的设计、开发或讲授并不完全直接相关的费用，它主要包括办公用品、设施及相关费用。33/545.4 培训的投资回报分析5.4.4投资回报率计算与非货币收益投资回报率计算收益/成本(Benefits/Costs Ratio,BCR)比率法，即用项目收益除以项目成本的比率，称为收益成本比率，计算公式是：BCR=项目收益/项目成本投资回报率是用净收益除以项目的成本得到的。净收益是项目收益减去其成本。这个比率一般用百分比表示。用公式表示：ROI(%)=(项目净收益/项目成本)*100%34/545.4 培训的投资回报分析5.4.4投资回报率计算与非货币收益非货币收益有些收益会表现为无形的、不能以货币表示的形式，或者说也不应该以货币来表示，但是对于全面客观地评估培训又是很关键的，如人际关系技能、团队建设、领导能力等。35/545.5 培训评估的流程包括评估决策、评估规划、评估实施、评估总结与反馈。5.5.1评估决策阶段培训需求分析：是培训项目设计的第一步，也是培训评估的第一步，只有明确培训需求，培训评估才有目标、针对性。确定培训评估的目的：会影响评估工作的开展、数据的搜集等，例如评估时为了改善培训管理，还是为了提高培训师队伍水平？建立培训评估数据库：搜集齐备培训前后的数据。一是相关岗位的业务指标评估数据库；二是培训学员的技能鉴定数据库；三是培训档案数据库。36/545.5 培训评估的流程包括评估决策、评估规划、评估实施、评估总结与反馈。5.5.2评估规划阶段确定培训评估层次：反应层、学习层、行为层、结果层。或者其他评估模型。选择评估方法：针对不同的评估层次和数据类型，选择恰当的评估方法。反应层可以采用问卷、评估调查表的方法；学习层可以采用笔试法、技能操作；行为层可以采用绩效考核法；结果层可以采用收益评价法。选择评估方案和测试工具。37/545.5 培训评估的流程包括评估决策、评估规划、评估实施、评估总结与反馈。5.5.3评估实施阶段收集培训对象的数据与资料，进行数据资料分析等38/545.5 培训评估的流程包括评估决策、评估规划、评估实施、评估总结与反馈。5.5.4评估结果总结与反馈编写评估报告评估目的、评估过程与方法、评估结果、评估结论（对整个培训工作的结论）、附录。培训结果沟通与反馈人力资源管理人员：用于今后改进培训项目管理层：用于决策是否资助培训项目受训人员：助其了解自身绩效变化，做出改变和进步受训人员领导：助其掌握学员学习与绩效变化情况，更好地协助和指导受训人员提高绩效。39/545.6 培训效果转化理论受训员工需将所学知识技能应用于工作当中，转化为员工的习惯行为，即培训学习的迁移，这样才能给企业带来实际效益。有三种较有影响力的理论：同因素理论、激励推广理论、认知转化理论理论强调重点适用条件同因素理论培训环境与共完全相同工作环境的特点可预测并且稳定，例如设备使用培训激励推广理论一般原则运用于多种不同的工作环境工作环境的特点不可预测并且变化剧烈，例如谈判技能的培训认知转化理论有意义的材料和编码策略可增强培训内容的储存和记忆各种类型的培训内容和环境40/545.6 培训效果转化理论5.6.1同因素理论培训转化只有在受训者所执行的工作与受训期间所学内容完全相同时才会发生。两种学习的相同因素越多，迁移的可能性就越大。一般在环境稳定、可预测的领域，如设备操作技能培训应用较广；但是在环境不可控、不可预测的领域，如人际技能培训，则应用价值不大。41/545.6 培训效果转化理论5.6.2激励推广理论认为同因素迁移只是一种简单迁移，对许多学习活动都没有意义，因为一旦情景发生变化，学习者将无所适从。两种学习之间的共同成分只是迁移的外在因素和条件；能否产生迁移的关键在于学习者能否概括出两种学习之间的共同原理，强调学习者对学习内容的概括加工，而不仅仅看重回忆问题。应该建立一种强调最重要的一些特征和一般原则的转换。即即便环境发生了变化，学习者也可以利用其掌握的一般性原理。42/545.6 培训效果转化理论5.6.3认知转换理论认为信息的储存和恢复是学习迁移的关键因素。培训效果转换取决于受训者恢复所学知识、技能的能力。在培训过程中应该鼓励受训者找出工作中遇到的问题，讨论所学内容的应用可能。由此，当培训结束后，在实际工作中遇到此类问题时，就更有可能恢复所学知识，从而加以应用。43/545.7 培训效果转化过程及其影响因素5.7.1培训转化的过程受训者特征：受训者特征：能力个性动机培训设计：培训设计：学习原理排序培训内容应用转换理论使用自我管理战略工作环境：工作环境：管理者和同事支持执行机会技术支持转换氛围学习保存推广维持44/545.7 培训效果转化过程及其影响因素5.7.1培训转化的过程培训项目设计：是学习环境的重要特征，如材料、实践安排、组织协调、场地环境等，会影响转化。受训者特点：主要体现为影响学习的各种能力和冬季，如果其不具备基本的学习能力、缺乏学习的动机和应用所学知识技能的能力，转化也会受到影响。工作环境：如管理者、同事是否支持，技术上是否支持，转化的氛围等，会影响转化。45/545.7 培训效果转化过程及其影响因素5.7.1培训转化的过程培训项目设计：是学习环境的重要特征，如材料、实践安排、组织协调、场地环境等，会影响转化。受训者特点：主要体现为影响学习的各种能力和冬季，如果其不具备基本的学习能力、缺乏学习的动机和应用所学知识技能的能力，转化也会受到影响。工作环境：如管理者、同事是否支持，技术上是否支持，转化的氛围等，会影响转化。46/545.7 培训效果转化过程及其影响因素5.7.2受训者特点对培训效果转化的影响培训动机和态度：要我学VS我要学。如果是以要我学的态度或者只是考证的需要等，那么对转化会有负面影响。基本技能：如果缺乏基本技能，即便员工认真学习，态度端正，但是也只能是照搬照用，而不能够融会贯通、灵活应用，转化效果不好。因此，要端正员工态度、考察员工基本技能，或者对受训者进行基本技能的辅导等。47/545.7 培训效果转化过程及其影响因素5.7.3工作环境对培训效果转化的影响培训结束后回到工作岗位，有些因素会影响到转化效果。48/545.7 培训效果转化过程及其影响因素5.7.3工作环境对培训效果转化的影响有利于培训转化的工作氛围应该具有以下特征：受训后员工的工作是按照让他们使用新技能的方式来设计的受训员工管理者能够鼓励其运用所学知识技能管理者对受训员工运用所学知识技能提出表扬，出现失误也不会当众责难受训员工运用所学知识技能取得进步会得到加薪奖励49/545.7 培训效果转化过程及其影响因素5.7.3工作环境对培训效果转化的影响影响培训转化的环境因素：管理者对培训效果转化的支持：管理者对培训效果转化的支持：管理者支持水平越高，就越可能发生转化。最低水平的支持是允许参加培训，最高水平的支持是管理者亲自参加培训。50/545.7 培训效果转化过程及其影响因素5.7.3工作环境对培训效果转化的影响影响培训转化的环境因素：同事对培训效果转化的支持：同事对培训效果转化的支持：同时参加培训的员工相互支持、探讨、交流，共同实现转化以前参加类似培训的员工指导近期参加培训的员工未参加培训的员工支持近期参训员工的工作。51/545.7 培训效果转化过程及其影响因素5.7.3工作环境对培训效果转化的影响影响培训转化的环境因素：提供有利于转化的技术支持提供有利于转化的技术支持在工作当中运用技能的机会：在工作当中运用技能的机会：有无机会、机会距离受训结束时间长短都会影响转化效果。学习型组织：学习型组织：在学习型组织内，学习氛围浓厚，员工都具有学习、培训意识，更有利于培训成果的转化。52/54课堂讨论题课堂讨论题 1.培训效果与培训评估是什么？培训评估在培训流程中的作用有哪些？2.评定培训的效度的四种类型是什么以及如何进行评估培训之前的可行性分析？3.培训评估可分为那些类型？4.培训评估模型包括哪些？他们的主要观点是什么？5.常见的培训方案设计与常用的培训评估信息收集方法各有哪些？6.培训效果的分解方法有哪些？以及如何进行投资回报分析？7.培训评估流程分为几个阶段？具体步骤有哪些？8.培训转化的含义及三种培训迁移理论的主要思想是什么？9.培训迁移过程的模型主要内容是什么？企业培训如何从受训者特点、培训项目的设计、工作环境三方面的改善来提高培训转化效果？53/54本讲结束 谢谢大家！54/54