教育评价标准编制PPT推荐.ppt
《教育评价标准编制PPT推荐.ppt》由会员分享,可在线阅读,更多相关《教育评价标准编制PPT推荐.ppt(35页珍藏版)》请在冰豆网上搜索。
第二节第二节教育评价要目的设计教育评价要目的设计一、指标体系的设计指标体系的设计
(一)指标与目标1指标是目标的一个方面的规定,是具体的、可测的、行为化和操作化的目标。
2目标目标是集体或个人的某一行动要争取达到的某种结果的标准、规格或状态。
(二)指标体系的结构直线式,一般用于微观评价和单项评价97树状式,一般用于宏观评价和中观评价98(三)指标体系的优缺点长处:
第一,便于测量;
第二,便于定量处理,易于得出综合结论第三,测量过程误差较小,信度较高。
指标体系的弱点:
第第一一,设设计计较较难难;
指标是一种具体化、现象化的目标。
将评价的属性具体化是设计指标的基本方法。
具体有:
1、抓本质属性,2、从分析事物间的相互联系开始,抓住事物变化后产生的效应。
如有的学校实行挂牌教学,两个老师开同样的课,学生自由选听-根据选听人数的多少3、抓事物的全部属性或相关因素(这是一种最不经济的方法,然而却是目前用得最多的一种方法)。
第第二二,较较少少灵灵活活性性,不易反映被评对象的特点和社会对人才多样化的需求。
第三,效度相对较低第三,效度相对较低。
(四)设计指标体系的原则(四)设计指标体系的原则981可测性原则2指标间相互独立原则。
3与目标一致性原则(整体完备、本质性)。
4可行性原则5、公平性原则(五)设计指标体系的程序和基本方法1001分解目标,提出初拟指标体系分解目标,提出初拟指标体系
(1)“神仙会”法或“头脑风暴”法专家们在一起,凭借自己的学识和经验,各述己见,畅所欲言,提出自己的意见;
并通过思想火花的相互碰撞,激发灵感。
然后再由组织者进行一定的归类整理。
(2)“解剖分析”法通过对三种典型案例的选取,分析导致各自之所以成功,之所以失败及之所以表现一般的要素,将这些要素提取出来,作为初拟的指标。
n2筛选或修订指标筛选或修订指标n
(1)调查统计法(P101)。
调查法与统计法的结合,是在调查获得资料的基础上进行统计的方法。
n
(2)理论论证102104n(3)专家评判n(4)实验修订二、概括性问题(二、概括性问题(issues)及其设计原则及其设计原则
(一)概括性问题概述指标作为一种评价要素,对提高评价的可靠性很有利。
但是,它的优点也是相对的。
研究表明,即使对于一个很具体的行为,人们的观察结果也会有很大的差异。
由于在观察的过程中,人的知觉具有整体性,人的思维也会渗入观察过程,因此,把注意整体判断的“概括性问题”作为评价要目也是很有用的概括性问题是针对指标的缺点(较难反映被评对象的特点和社会多样化的需要、设计较难、效度相对较低。
)而提出的、针对教育工作者所关心的方面,用一系列较为抽象的问题作为评价要目。
这些问题类似于日常的调查提纲。
如:
在评价学校办学水平中,当涉及到评价“学校确学校确定的培养目标是否妥当定的培养目标是否妥当”时,可以提出以下问题:
1、本校培养何种人才(种类、规格)2、社会对本校培养的毕业生有何具体要求?
3、学校在满足社会需要方面采取了何种措施?
这些问题并非具体,但同样起到了规范评价内容的作用,它告诉评价者去调查哪些方面的信息由由于于概概括括性性问问题题不不针针对对具具体体行行为为,比比较较抽抽象象,强强调整体认知,因而,调整体认知,因而,作为评价的要目,它具有如下长处作为评价的要目,它具有如下长处:
第一,效度高;
第二,在形成性评价中,实用性强。
由于所提问题针对性强,在帮助被评价者改进工作中具有较大作用;
第三,易于制定。
缺点:
第一,评价过程中一般误差较大,因而信度较低;
第二,不利于定量处理,因而也不利于相互之间的综合性比较。
(二)概括性问题的设计原则1针对实际的原则。
就是说概括性问题应该而且必须是教育工作者所关心的、急于解决的问题。
这样通过概括性问题得到的信息就可以直接地用于改进教育决策和教育活动。
概括性问题最大的优点就在于它不需要行为化或具体化,由于不需要这些转化过程,因而就有了较高的效度。
2达意性原则。
即要求概括性问题的表述必须明确,不要使人产生模棱两可的模糊理解。
n-技术上简单、明了不要模棱两可。
避免复杂句型(否定、双重否定等。
)n-少术语或专业术语3突出重点原则。
即抓主要因素,不抓次要因素,更不抓具体问题。
(三)概括性问题与指标的关系。
1从形式上看,指标可以看作是概括性问题的分解和具体化行为化;
概括性问题则是指标系统的概括和抽象。
指标着眼具体,但有时有些形而上学;
概括性问题设计较简单,但操作较难。
2从用途看,需定量时,指标用得较多;
需满足对象自我发展需要时,用概括性问题。
n-对于共性的、基本的、规范的要求,可用指标系统;
n-对于个性的、特色的要求,用概括性问题。
不要用一个模式。
但有一个趋势要淡化指标。
第三节第三节指标体系权集的确定指标体系权集的确定一、权集的含义一、权集的含义所谓权集,就是权重集合的简称。
指标的权重是指指标在指标体系中的地位和重要性程度。
而用来反应指标重要性程度大小的比率值称为指标的权重系数。
如果说指标体系表明在整体中哪些因素有价值,指标的权重则是表明这些因素价值有多大。
二、权集的构成形式有两种:
(一)分级权重分配形式。
设项目为整体1,每一层次中各指标的权系数按照百分比进行分配,每一层次各指标的权重之和为一。
设项目为整体1级指标的权重为W1、W2、W3WI,WI=1级指标的权重为WI-1、WI-2、WI-3WI-J,WI-J=1级指标的权重为WI-J-1、WI-J-2WI-J-K,WI-J-K=1
(二)直接权重分配形式(112表5-17)。
设项目为整体1,直接规定各指标在整体中的权系数。
n设项目为整体1n级指标的权数为W1、W2、W3WI,WI=1n级指标的权重为WI-1、WI-2、WI-3WI-J,WI-J=WIn级指标的权重为WI-J-1、WI-J-2WI-J-K,WI-J-K=WI-J三、权数的形态三、权数的形态
(一)从权数的归属形态分自重权数加重权数自重权数又称为绝对权数,自身被赋予的数值;
加重权数则是指各项目的各等级被赋予的权数,又称相对权数。
参见P113表5-23;
P93
(二)从权数的数字形态分,百分数整数小数四、加权的种类四、加权的种类分类很多,常见的通常有两类:
(一)单项加权。
通常指对评价项目各个要素的加权。
(二)总体加权。
是对评价得到的总分进行加权。
一般按评价者的地位不同进行加权。
n例P144,表6-11五、配置权重的依据与方法五、配置权重的依据与方法
(一)加权的依据1影响评价对象质量之要素的重要性程度2特定评价的具体目的3评价对象所处整体的实际情况。
(二)方法1经验法。
是指依据一些富有经验的优秀教师、评价人员和有关研究人员的主观经验确定权数的方法。
2专家评定法。
由设计者初拟出指标的权数,征求专家意见。
意见收回后,取平均值,归一修整归一修整,确定权数。
这是目前采用较广泛的一种方法。
此法简便易行省时省力比较受欢迎。
P1083迪尔菲咨询法是一种改进了的经验法经验法和专家咨询法专家咨询法。
这种方法主要是采用匿名方式,用分发问题表的形式反复向专家们征求意见,最后意见趋于一致而得出结论。
该方法具有以下特征:
(1)权威性。
(2)匿名性。
(3)反馈性。
(4)收敛性具体步骤:
具体步骤:
第一步编制专家咨询表评定等级结果指标很重要重要一般不重要指标1指标2第二步具体实施专家咨询n遴选专家-发放咨询表-统计处理。
参加咨询的人数要适中,太少缺乏代表性,过多则难以组织,也增加结果处理的工作量。
研究指出,实际参加人数在15人左右较为适宜,因此预选人数要多于此数。
对于复杂问题及重大问题,可适当增加人数。
n统计处理。
一般要计算两个特征值:
nA全体专家对每一指标权重的平均估计值。
nB每位专家的个人估计值与全体专家的平均估计值的偏差。
n接着进行第二轮征询。
在进行第二轮咨询时,要将第一轮咨询情况反馈给各专家,同时还要请偏差值较大的专家作出新的判断。
专家个人估计值指标ABCDEFGHI均值说明办学方向办学条件办学过程办学成果如此进行几轮反复,得出较为一致的结论。
第三步进行归总处理。
取平均值,再归一化处理4比较平均法。
以同级指标集内重要性程度最小的指标为基准,其他指标与之比较,作出是其多少倍的重要程度的判断,然后归一修整,得出各指标的权数。
这种方法简单易行,便于掌握。
例如:
办学水平评价指标集内,如认为“办学条件”重要程度最小,将其定为1,其他指标与之比较,分别确定“管理水平”为1.5,“工作质量”为2.0,“学生质量”为2.5,则可作归一化处理,求出其权数:
n先总加:
1+1.5+2.0+2.5=7n再分别用7去除,则得:
0.14,0.21,0.29,0.36。
5对偶比较法对偶比较法是将同层次的各项指标,两两比较,按两者之间的相对重要性,给定比值,从而计算出各项指标的权系数的方法。
分项权数指标对偶比较比较得分总和权数办学条件0.30.20.10.60.1管理水平0.70.30.21.20.2工作质量0.80.70.41.90.32学生质量0.90.80.62.30.38合计11111161第四节第四节评定标准评定标准一、评定标准的三要素1标目(或标准内容、强度和频率)是指要素特征的表现程度和频率。
强度,指各要素要求达到的程度。
如在等级评定中,达到什么程度算优、什么程度算良、什么程度算合格等;
频率,指各要素要求达到的数量或相对次数(如人次、比率)。
标目是评定标准的主要组成部分2标号是指标目的标记符号。
通常用字母(A、B、C、D)、汉字(如甲、乙、丙)或数字(如1、2、3)来表示。
标号本身无独立意义,只有当赋予它某种意义时它才有意义。
这是评定标准的辅助部分。
3标度是评定的档次。
它可以是定性的(优、良、中、差),也可以是定量的(用数字来表示各个档次);
它可以是连续的,也可以是不连续的。
这是评定标准的基础部分。
二、评定标准的种类二、评定标准的种类P1111分数标准。
它是用数量表示各项指标要达到要求的程度。
2等级标准。
它是用等级表示各指标要达到要求的程度。
3.评分标准等级标准的混合4评语标准。
用语言描述各指标要达到要求的程度。