华恒智信-什么是Phillips“五级评估指标”模型.doc

1、 第 13 页华恒智信-什么是Phillips“五级评估指标”模型与柯氏四级评估不同，菲利普斯的五级评估模型是非常符合互联网思维的，即：清晰地提出自己的价值主张，作为国际绩效改进的主席，菲利普斯的五级评估非常强调一句话：“让我看到钱”，这种思想是非常符合美国企业的价值主张-为股东创造最大价值，那么如何将“让我看到钱”的思想落实到具体的评估过程中呢？评价数据用途评估级别及相关数据的种类数据的重点数据用途概述第一级：反应和/或满意度，以及所计划的行动培训项目、培训人员和评选结果可能将如何得到应用1.衡量相关人员对培训项目的主观看法，主要是学员对培训项目和对培训人员的反应和满意度2.它也许还可以衡量

2、另一个维度：学员参加培训后所指的的行动计划，即学员如何实施新的要求、项目或流程，或他们将如何运用新知识和新技3.有关反应的信息可用来改善培训的内容、设计和实施流程4.制订行动计划的过程有助于促成培训成果向工作环境的转移5.有关行动计划的信息可以用来决定将来评估的重点，并用来对比实际结果和当初的计划第二级：学习结果重点在学员及有利于学习的支持性机制1.衡量学员在多大程度上掌握了培训中的内容：所期望的态度、知识、技术、流程等2.对学习的衡量要比获得反应的信息难，要采用客观的衡量方法，衡量指标要能够量化3.衡量获得的信息用来判断学员对学习内容的理解和吸收程度4.衡量获得的信息还可以用来改进培训项目的

3、内容设计和实施流程第三级：工作中的应用和/或实施重点在学员、工作环境和有助于学习内容得以应用的支持性机制1.衡量学员在工作中行为的变化，包括培训中所学知识和技术在实际工作中的应用2.评估信息可以提供有关培训内容在工作环境中是否得到应用以及使用的频率和效果3.探寻培训内容有效的条件；若有效，如何在其他环境条件下重复应用4.探寻阻碍培训内容应用有效性的原因，以便能够有针对性地对培训项目加以改进，或者促进其他培训项目的发起和实施第四级：对业务的影响重点在培训对组织绩效所产生的影响1.评估目的在于确定培训对于改进组织绩效所产生的影响或效果，并于组织的期望值进行对比2.评估产生的主观数据包括顾客的满意度

4、增加、员工的敬业度提高、顾客的保留率提高、对顾客反应时间缩短等3.评估产生的客观数据包括成本的节省、产出的增加、时间的节省或质量的改进等4.获得业务影响效果信息的方式有：培训前后分别收集数据，对通过培训引起的业务绩效的改进情况（或没有改进）进行分析，将培训的结果和适当的业务指标联系起来第五级：投资回报率（ROI）重点在于培训所产生的用货币形式来体现的收益1.本级评估关注的是相对于培训成本，培训产生的业务效果所带来的用货币形式体现的价值，并进一步计算ROI2.ROI可以用投资回报的价值或成本收益的比例（%）来表示3.ROI衡量了培训项目对实现组织目标的贡献大小，显示了培训项目的真正价值4.由培训

5、产生的业务指标的改进所带来的ROI不一定都是正值无形收益重点在于用非货币形式体现的因素来衡量培训的价值1.无形收益数据是指不能或不应该转换成货币价值的数据2.无形收益数据与数据的重要性无关，它所指的是数据缺少客观性和无法转化成用货币形式来体现价值；或者有时将某些数据转化成货币形式来体现价值的代价太高昂3.无形数据常常是培训所产生的正面影响的体现，但又无法用货币形式来衡量其价值的大小4.在培训所产生的业务效果无法用货币形式来衡量时，它就无法与培训成本相比较，也就无法确定其ROI，因此，无形收益必须以非货币形式另列一类5.有时管理层和利益相关者满足于无形收益的数据6.培训对业务效果所产生影响的主观

6、数据一般属于无形收益，如顾客满意度、员工敬业度、客户保留率、员工保留率等7.培训对业务流程中所产生的影响的主观数据也属于无形收益，如组织承诺的增加、团队合作的改进、客户服务的改善、冲突的减少、压力的减轻等效果评估的“十步骤”1、 设定培训目标，确定效果评估的基础（1）以结果为导向确定培训评估的框架 确定以结果为导向的效果评估框架是“五级六指标”流程的第一步，目的在于确定培训项目的效果领域和具体业务指标，并往每一项指标设定目标期望值，使培训目标与组织目标高度契合。以结果为导向的评估框架，揭示了效果评估贯穿于整个培训过程的作用点（如图）：阶段A：对组织、任务和个人层次上的培训需求加以确认，更重要的

7、是对每一需求是否满足的评价进行分级，根据培训需求的层次决定相应的效果评估等级，制定评估策略和计划。阶段B：从培训方案设计开始到实施培训方案，在此过程中要进行一级（满意度/反应，行动计划）和二级（学习结果）评估，并且根据评估策略和计划收集相应的数据以供更高级别评估之用。阶段C：对项目的跟踪评估。在设定的时间周期内进行三级（应用/实施）、四级（业务影响）、五级（投资回报率）和/或无形收益的评估。（2）制定每一级培训效果评估的目标 总体目标的制定上有ASTD法、人力资源指标法等，1）.反应/满意度目标的制定作为最为基础的目标，一级培训目标反映了学员对项目的喜欢程度，体现了是否在培训中建立双赢关系，这

8、对取得更高级培训效果至关重要。因此，学员对培训活动的反应应该是正面的，至少也不应该是负面的。2）.学习目标的制定学习目标既能够帮助学员明确学习的内容和成绩要求，又为评估学习效果设定了标准，以下内容可作为设定学习目标时参考：目的：衡量知识和技能的掌握程度最好的学习目标：1.描述可观察到的和可衡量的行为2.以结果为导向，描述清楚、具体3.具体说明学员在培训之后的应知应会应做4.包含三个元素：行为在培训结束时，学员将能够做什么条件在什么情况下学员才能完成任务标准有效地完成认为必须要达到的程度或水平三种类型的学习目标：1.认知熟悉术语、概念和流程2.知识对概念和流程的理解3.行为技能的展现水平（至少具

9、备基本水平）举例：1.能够辨别和理解6个领导力模型和理论2.在给定的19个客户访问场景中，以100%的正确率来启动客户拜访程序（应用正确的步骤）3）.应用/实施目标的制定这目标是学习目标的延伸，反映的是从培训中学到的知识和技能在实际工作中的应用，同时为评估员工在工作中的行为变化和绩效改变提供了标准。以下内容可以供设定这个目标使参考：目的：衡量知识和技能在工作中的应用程度最好的应用/实施目标：1.描述可观察到的和可衡量的行为2.以结果为导向，描述清楚、具体3.具体说明学员在培训之后应该做出哪些改变（行为和绩效）4.包含三个元素：行为在培训结束后的一个具体跟踪时间周期内，学员产生了哪些改变，或取得

10、了哪些成绩条件在什么情况下学员才能完成任务标准有效地完成认为必须要达到的程度或水平两种类型的应用/实施目标：1.基于知识层面的目标：对概念、流程的一般理解2.基于行为层面的目标：技能的展现水平（至少具备基本水平）需要回答的主要问题：1.在工作中将应用什么样的新知识2.应用技能的频率是怎样的3.将完成什么样的新任务4.将采取什么样的新措施5.将采取什么样的新行动6.将实施什么样的新程序7.将实施什么样的新方针8.将实施什么样的新流程举例：1.在每个客户访问的场景中，应用开启拜访的正确步骤2.确定小组成员中谁在客户拜佛过程中表现出缺乏信心，以便在应用过程中为他们提供辅导4）.业务影响目标的制定这个

11、目标是所有利益相关者对培训“成果”的期望所在，是衡量学员是否将培训中所学知识和技能应用到实际工作中而带来行为和绩效变化的关键步骤，也是对知识掌握（二级目标）和应用/实施（三级目标）的进一步验证。以下内容可以供设定这个目标时参考：目的：衡量应用知识和技能对业务产生的影响最好的业务影响目标：1.衡量指标必须与培训中所教授的知识和技能相关2.描述的衡量指标容易收集3.以结果为导向，描述清楚、具体4.详细说明培训结束后，学员在业务部门中应取得怎样的成果四种有硬性数据的业务影响目标：产出、质量、成本、时间三种普通的带有软性数据的业务影响目标：1.客户服务（响应速度、准时交货、完好性等）2.工作环境（员工

12、保留、员工抱怨、不公平待遇等）3.工作习惯（怠工、缺勤、违反安全条例等）举例：1.在一年内，将员工流失率从30%降低到15%2.在半年内，将缺勤率从周平均10%降低到5%5）.投资回报率目标的制定具体计算办法：将培训获得的价值（用货币形式表示的净收益）与投入的资源（培训总成本）相比较。即：ROI=（培训净收益培训总成本）100%2、确定评估计划和基础数据评估计划包括数据收集计划和分析计划，而数据必须包括客观的可衡量数据和主观的描述性数据。（1）基础数据的分类数据分为硬数据和软数据，分别举例：硬数据：产出成本时间质量生产的单件产品数制造完成的重量组装的零件数回收的货款出售的零件数完成的表格数放出

13、的贷款额库存周转率来访的病人数处理完的申请数毕业的学生数完成的工作任务每小时的产出预定的工作量奖励分红金额出货量开发的新客户预算变化单位成本可变成本固定成本一般管理成本运营成本成本减少项目成本项目成本节约事故成本销售费用设备停机时间加班时间出货时间周期项目完工时间监管的时间新员工的试用期培训时间会议日程维修时间工作中断时间订单响应时间报告延迟时间废料的比例废品率客户拒收率订单出错率返工率顾客投诉率缺料率与标准的偏差生产故障率事故数量软数据：工作习惯感觉/态度新技能进步/改善工作氛围主动性缺勤工作主动性倾听工作效率的提高不公平待遇的数量新想法的实施怠工工作态度阅读速度加薪次数员工抱怨项目的圆满完

14、成超额休息工作责任心应用新技能的意向参加培训次数工作满意度提交的建议数量违反安全条例积极工作行为使用新技能的频率业绩考评等级员工流失落实的建议数量沟通故障员工敬业度做决定的次数工作效率的提高诉讼案件工作成就员工士气解决的问题避免的冲突心理咨询问题明确工作目的和设计业绩指标（2）数据收集计划举例：以销售培训为例项目：互动式销售技巧培训责任人：日期：级别广义的项目目标衡量指标数据收集数据来源时间责任人一反应/满意度肯定性反应建议改进的内容要采取的行动*在1至5数值范围内,质量、实用性、培训目标完成状况的平均值至少要达到4.7*行动计划的提交率达到100%反应问卷学员3、 培训期间的数据收集（1）第一级（反应和满意度）评估的数据收集：1）.标准的反应和满意度评估数据由八个部分组成，如下表：反应和满意度培训评估表培训项目名称：日期：培训项目编号：地点：以下描述与本次培训的某些具体内容相关。请标明您对每项描述同意的程度，并在需要时给出评论： =非常不同意 =不同意 =无所谓 =同意 =非常同意内容：1.教学目标解释清晰明了