第五章 教育评价方案的编制与实施.ppt

1、第四章教育评价方案的编制与实施,第一节教育评价方案设计概述 第二节教育评价方案的制订第三节教育评价的实施,第一节 教育评价方案设计概述,一、“教育评价方案”的概念（P31）在教育评价活动中，为实现一定评价目的对评价的依据标准、方法途径、实施程序等所作的设计和安排。是评价工作的操作指南。,第一节 教育评价方案设计概述,三、教育评价方案设计的基本内容（P31）明确评价目的，确定评价对象确定评价标准，选取合理的评价尺度确定搜集信息的内容和途径选用科学合理的方式方法和工具（量表和标准）评价数据的整理和解释（各类表格）,第一节 教育评价方案设计概述,二、教育评价方案具有以下几个特性目的性规范性规范性就是

2、评价方案具有一定程度的统一性。因而它具有一定的指导性。它要求评价人员严格地按照它所规定的程序、准则、标准对所有的评价对象进行评价。评价方案的规范性，决定了它在一定的范围内能使评价的结果具有可比性。可操作性评价方案不能也不应该只有抽象的、原则性的意见，而应该是具体的、可实施的。,第二节教育评价方案的制订,一、教育评价方案设计的基本步骤二、教育评价准则及其设计的基本方法三、评价标准及其设计的方法四、评价方案的编写,一、教育评价方案设计的基本步骤,1、确定与表述评价目的2、根据特定的评价目的设计评价准则3、按照各准则之间的内在逻辑形成分级系统，并依据它们的相对重要性，对各准则赋予相应的权重。4、确定

3、测定的量表和评价标准，为测量和评价提供作为参考系统的尺度。5、设计为收集各种信息的表格。表格的设计要本着方便实用的原则，力求精炼、简明、统一。,二、教育评价准则及其设计的基本方法,准则（criterion,复数criteria）是对评价活动内容或方面质的规定（即对被评属性的规定）。它是评价方案的核心部分，规定评价活动评什么、不评什么。目前，在教育评价中，评价的准则通常有两种形式：指标体系（最常用的表述形式）概括性问题,A1教师教学工作过程（0.6）,B1规定工作量（0.10）C-1完成规定工作量（1.0）B2课前准备（0.12）C-2课时计划、单元计划（1.0）,C-3教学内容（0.23）C-

4、4教学组织（0.23）C-5教学方法（0.28）C-6教学素质（0.26）,B-3课堂教学（0.45）,B-4作业处置（0.11）C-7作业布置、批阅、讲评（1.0）,B-5课外辅导（0.10）,C-8学科培优（0.6）C-9学科补差（0.4）,B-6教学教研工作态度（0.12）,C-10教学工作态度（0.5）C-11教研工作态度（0.5）,A2教师教学工作效果（0.4）,B-7学科考试成绩（0.52）,C-12群体提高度（0.6）C-13优生率（0.4）,B-8学生学科特长（0.24）,B-9教学教研成果（0.24）,C-14学科竞赛成绩（0.6）C-15学科实践能力（0.4）,C-16课堂

5、教学获奖（0.5）C-17教研成果（0.5）,广东实验中学科任教师教学工作评价指标体系,（一）指标体系及其设计方法,1、指标体系的概念把表征各目标的所有指标及及其相应的权重和标准有机地组合在一起，组成的有一定结构和功能的系统。指标：是根据评价的目标，由评价指标的设计者分解出来的，能够反映评价对象某些方面本质特征的具体化、行为化的主要要素，它是对评价对象进行价值判断的依据。权重：根据组成事物的要素在整体中的地位和作用不同，而赋予的一定数值。标准：是衡量评价对象达到评价指标要求的尺度。,硬指标：是指达标要求是固定的精确的指标，它强调评价时看“硬件”，包括实物、证件、统计数据、静态资料等。如“教学设

6、备”、“场地”、“获奖情况”、“教师学历”、“学生考试成绩”、“教师队伍年龄结构”等。软指标：是指达标要求伸缩性较大、不精确的指标。它强调评价时看“软件”，常采用定性分析评价，包括对事物的性质特点、变化过程、因果关系的分析评价，如“办学特色”、“教学水平”、“教学思想”、“教改状态”等均属软指标。,指标,指标的长处：便于测量；便于定量处理，易于获得综合结论；测量过程误差较小，信度较高；指导的弱点：设计较难较少灵活性，不易反映被评对象的特点和社会多样化的需要效度相对较低,2、指标体系的结构,A、直线式结构 二级指标11一级指标1 二级指标12 二级指标21一级指标2 二级指标22 二级指标31一

7、级指标3 二级指标32,B、树状式结构,例：学生主体性的基本结构,主体性,自主性,主动性,创造性,自尊自信,自我调控,独立判断决断,自觉自理,成就动机,竞争意识,兴趣和求知欲,主动参与,社会适应性,创新意识,创造性思维能力,动手实践能力,3、教育评价指标体系建立的步骤,（1）确定教育评价的对象和目标（2）分解目标，提出初拟指标（3）筛选指标与分配权重（4）理论论证（5）专家评判（6）预试修订,（一）指标体系及其设计方法,4、指标体系设计的原则目标一致性直接的可测性体系内指标的相互独立性指标体系的整体完备性指标的可比性可接受性,（一）指标体系及其设计方法,5、指标设计的基本方法第一，从内涵分析入

8、手，抓住事物的本质属性，然后把这一属性的现象性外观表现确定为指标。这是一种最简捷、最有效的方法。第二，从分析事物间的相互联系开始，抓住事物变化后产生的效应，把事物变化所产生的效应确定为指标。第三，抓住事物的全部属性或相关属性，把因素群作为相关指标。,6、初拟评价指标的方法,头脑风暴法又称集体思考法或智力激励法，是利用头脑积极思维，进行智力碰撞，激发智慧的灵感，从而提出评价指标的一种常用方法。因素分解法是一种将评价指标按照评价对象本身的逻辑结构逐级进行分解，把分解出来的主要因素作为评价指标的方法。理论推演法即根据有关学科的理论推演出评价指标的方法。个案研究法通过对少数典型事例进行研究而设计评价指

9、标的方法。,头脑风暴法,又称集体思考法或智力激励法，是指采用会议的形式，如集专家开座谈会征询他们的意见，把专家对过去历史资料的解释以及对未来的分析，有条理地组织起来，最终由策划者做出统一的结论，在这个基础上，找出各种问题的症结所在，提出针对具体项目的策划创意。它于1939年由奥斯本首先提出的，并在1953年将此方法丰富和理论化。优点：获取广泛的信息、创意，互相启发，集思广议，在大脑中掀起思考的风暴，从而启发策划人的思维，想出优秀的策划方案来。缺点：1.邀请的专家人数（一般5一12人比较合适）受到一定的限制，挑选不恰当，容易导致策划的失败。2.由于专家的地位及名誉的影响，有些专家不敢或不愿当众说

10、出与己相异的观点。,因素分解法,因素分解法是一种将评价指标按照评价对象本身的逻辑结构逐级进行分解，把分解出来的主要因素作为评价指标的方法。运用因素分解法，应当注意几个问题：(1)必须使用统一的分解原则。(2)分解出来的指标上下层次之间必须相应和相等。(3)因素分解必须遵循由高到低的层次逐层分解。,理论推演法,理论推演法是根据有关学科的理论推演出评价指标的方法。例如：根据心理学理论，智力是一般的认识能力，包括观察力、注意力、记忆力、思维力、想象力；能力是运用智力解决问题的实际本领，包括运用知识的能力、独立获取知识的能力、创造能力、表达能力、交往能力等。据此，我们便可以推演出评价中小学生智力、能力

11、的指标。,个案研究法（典型研究法）,即通过对少数典型事例进行研究而设计评价指标的方法。它可以下三种类型：正向研究是通过对成功的典型事例研究，提出评价指标；负向研究是通过研究失败的典型，提出评价指标；正负向结合研究是通过成功的典型事例与失败的事例进行比较，提出评价指标。运用典型事例研究提出评价指标有两点必须注意：(1)选择的事例必须具有典型性和代表性,两者缺一不可。(2)要与理论类推法相结合。,7、筛选指标和分配权重的常用方法,20世纪50年代以来，研究工作者开发出许多筛选指标和分配权重的好方法。现介绍几种最常用的方法（P39）：特尔斐法关键特征调查法层次分析法,特尔斐法,此法是20C50年代美

12、国兰德公司赫尔默开发的一种专家咨询法，即采用“背靠背”的匿名问卷调查的方式，征求专家的意见，通过多轮调查与信息反馈，专家意见逐步趋向收敛，最后可获得一致的意见。,特尔斐法：,优点：采用向局外专家咨询的形式，从而减少了内部人员因有切身利害关系可能带来的偏差；“背对背”的通讯咨询方式，可以免除权威人士的威望影响和其他干扰；专家咨询的面更广、权威性也趋向于更高；有控制地多次反馈，对问题的探讨较为深入，使意见逐步趋向一致；咨询的结论便于定量处理。,关键特征调查法,它是先请调查者从所提供的备择指标中找出最关键、最具特征的指标，再对指标进行筛选，最后确定指标的权重。下面以对新时期高校干部政治素质评价指标进

13、行筛选为例，说明其操作步聚：,调查者根据经验或理论分析为高校干部的政治素质提出了10个备择指标见下表：高校干部政治素质备择指标调查结果,2、关键特征调查法,（1）提出备择指标，并进行调查。（2）计算人数和百分比，并将其从高到低排出次序。（3）按一定的规则选取指标。（4）各指标权重系数的计算,若以选择各指标的人数百分比（用T表示）为尺度，将75T100作为第一重要指标，50T75为第二重要指标，25T50为第三重要指标，T25予以忽略。那么高校干部政治素质应由下表的5个指标组成。高校干部政治素质各指标权重,（4）各指标权重系数的计算,（4）各指标权重系数的计算,层次分析法（两两比较法）,这是美国

14、学者萨蒂首先引进教育评价领域的。基本方法是要求有关人员对同一层次的评价指标进行两两比较，并加以评分，区分出各项指标影响目标实现的相对重要程度，重要者记为1分，次重要者记0分；然而分别计算各指标得分之和，再除以所有指标得分之总和，构成数值化的判断矩阵。经运算排序后，求得各指标的权重。,两两比较法的各指标权重计算表,（二）概括性问题及其设计方法,1、概括性问题（issues）是针对指标的缺点而提出的评价准则，并针对教育工作者所关心的方面，用一系列较为抽象的问题作为评价准则。这种问题类似于日常的调查提纲。学校办学水平评价中，涉及评价学校确定的培养目标是否妥当时，人们可以提出以下几个问题：本校培养何种

15、人才（种类、规格）社会对本校培养的毕业生有何具体要求？学校在满足社会需要方面采取了何种措施？,（二）概括性问题及其设计方法,2、概括性问题的特点：概括性问题不针对具体的行为，比较抽象，强调整体认知。长处：效度高；在形成性评价中，实用性强；易于制定缺点：一般误差较大，信度较低不易于定量处理，因而也不易于获得综合性的结论,（二）概括性问题及其设计方法,3、概括性问题的设计原则（P38）针对实际的原则明确简练的原则突出重点的原则,（三）概括性问题与指标的关系,概括性问题与指标是两种不同形式的准则，但这两种不同形式的准则是有一定联系的。一般地，可以把指标看做是概括性问题的分解和具体化、行为化；概括性问

16、题则是指标体系的概括和抽象。,（二）概括性问题及其设计方法,1、概括性问题（issues）不针对具体的行为，比较抽象，强调整体认知。2、长处：效度高；在形成性评价中，实用性强；易于制定3、缺点：一般误差较大，信度较低不易于定量处理，因而也不易于获得综合性的结论,三、评价标准及其设计的方法,1、标准的概念与分类标准（standard）是教育评价学中的一个重要概念。通常这个概念可以有两种认识：其一指事物质变的临界点，事物质变过程中量的规定性。其二为标准物即测量的量表、尺度,标准,从评价内容上分类从评价的参照角度分,效能标准职责标准素质标准,社会标准科学标准,效能标准：又分为效果标准和效率标准。前者是从工作效果的角度确定的评价标准；后者则是把人力、物力和时间的投入与成果联系在一起进行考察。职责标准：它主要是从评价对象所应承担的责任和完成任务的角度进行评价。它主要看评价对象的劳动过程、工作任务和态度。素质标准：它是从承担各种职责或完成各项任务应具备的条件的角度提出的标准。,2、评价指标标准的编制方法,1、期望评语式编写法2、积分评语式编写法3、隶属度式编写法4、行为目标编写法5、量表式编写法6