考试命题的基本知识与技术PPT推荐.ppt

1、考试结果虽然不能说明全部素质，但许多素质可以通过现代考试测量科学方法来判断。,第三，恢复高考让中国的人才培养走上快速发展之路。中国教育发展、中国人才培养、中国经济发展、中国科技实力、中国建设成就等，中华民族惊人的创造力，让世界各国刮目相看，让世界感到震惊，让所有华人感到自豪，让超级大国感到不安。其他经济大国用一、二百年时间走过的发展道路，我们用了50多年，其中有传统学校教育的功劳，也有考试制度的功劳。,一、布鲁姆分类二、考试命题的四度,第一部分 命题的基本知识,基于不同认知能力及其在试题中的体现，认知能力是可以测量的，有操作性的。布鲁姆分类为识记、理解、应用、分析、综合、评价至今都是对教学和测

2、试最为基础、最为重要的教育、评价目标分类。它告诉我们教学和评价中的目标有哪些？即应培养学生哪些方面的能力？这些目标具体的体现是怎样的？这不但对评价测试有直接的指导作用，对于教学来说也有重要的参考价值。,一、布鲁姆分类,（一）识记：认识并记住,记忆的一个重要环节。通过反复感知的过程借以形成比较巩固的暂时联系。它是记忆的必要前提。记忆是认知的一个侧面，一般分为识记、保持和回忆三个过程。识记可以分为无意识记和有意识记两大类。有意识记又可分为机械识记和意义识记两种。,1.具体的知识,1）术语和符号2）具体事实,惯例。约定俗成的规则。如用于绘制地图和编写字典的惯用符号，社会行为的规范，以及在学术领域常用

3、的规则、风格或习惯用法；趋势、过程和因果关系。多种相关联的因素需要识记。分类。能识别囊括各种问题或材料的某一领域。准则。有关检验或判断各种事实、原理、观点及行为所依据的准则。如判断食物是否有营养的标准。方法论。在某一学科领域所使用的、以及调查特定问题所用的探究的方法、技巧、步骤。,2.有关方式方法的知识,3.学科中的普遍原理与抽象概念,原理和概括。对各种现象的观察结果进行概括的特定抽象概念。了解诸如细胞理论、渗透、光合作用的基本的生物学原理；氧化反应的主要特征；各种文化的主要特征；寓言故事的特点等。理论和结构。针对某种复杂现象、问题或领域提供一种清晰的、完整的、系统的阐释以及它们相互关系的知识

4、。如各种文艺理论、各种哲学流派、各种民主理论、各种经济学说等。而原理和概括被视为无需相互联系的独立项目。,（二）理解与领会,1.转化,从一种抽象水平转化到另一种抽象水平（抽象具体）符号形式与其他形式的相互转化（符号语言、现象）从一种言语形式转化为另一种言语形式【a抽象表达手法（隐喻、象征、反话、夸张）普通语言；b根据上下文领会某个片段的含义；c准确、优美的翻译】,2.解释,找到重点将内容编排与重组与自己已有经验和观念联系起来理解内容中所涉及现象、观念之间的关系,3.推断,根据已有信息进行总结并陈述结论预测发展趋势认识影响事物发展过程的条件和因素识别相对可能的结果和极有可能的结果 上述考察“解释

5、”的内容用来测验“推断”常常是有效的。推断就是试图确定学生能否不拘泥所给的资料或信息的范围，正确地运用和扩展这些资料或信息。,推断的三个方面,时间：已经发生未来数量：样本总体领域：A领域B领域,（三）应用,将学习材料用于新的具体情境，包括原则、方法、技巧、规律的拓展。代表较高水平的学习成果。应用需要建立对知识点掌握的基础上。,新而合理的情境是应用的前提,提供一个虚构的情境使用学生不可能接触过的材料对熟悉情境赋予新意,（四）分析,将事物、现象、概念分门别类,离析出本质及其内在联系。分析是比理解和应用稍微高级一些的能力。分析不仅要求“知其然并且知其所以然”，更强调在新情境中综合各种因素乃至未知因素

6、进行个体化的探索与思考。,分析就是将研究对象的整体分为各个部分、方面、因素和层次，并分别地加以考察的认识活动，找出这些部分的本质属性和彼此之间的关系。,1.要素分析 2.关系分析,（五）综合,将多种元素进行整合、改组，成为一个新的、更清晰的整体。强调学生的独立性、独创性。,1.个人化的交流与表达,综合各种现象、概念表达自己的理解撰写文章、吟诗作文谱写音乐作品,2.制定计划或操作程序,提出检验假设的方法将调查结果应用在实际情境中为解决某个问题设计专门的方法实现他人的要求,（六）评价,综合各种信息，做出个人化的、有逻辑、有深度的解读衡量、评定其价值，其中强调其反思批判和独创性。这样的试题往往没有所

7、谓的标准答案。,1.评价按学习时段划分,诊断性评价（教学前评价或前置评价）形成性评价（过程评价）总结性评价（终结评价或事后评价）,2.关于SOLO分类评价,SOLO是英文“Structure of the Observed Learning Outcome”的缩写，意为：可观察的学习结果的结构。SOLO分类评价法是一种以等级描述为基本特征的质性评价方法，由澳大利亚学者约翰比格斯（Biggs）教授创建。SOLO分类评价法的基本理念源于皮亚杰（Jean Piaget，18961980）的认知发展阶段论。,（1）前结构层次。学生基本上无法理解问题和解决问题，或者被材料中的无关内容误导，回答问题逻辑混

8、乱，或同义反复。（2）单点结构层次。学生在回答问题时，只能涉及单一的要点，找到一个解决问题的线索就立即跳到结论上去。（3）多点结构层次。学生在回答问题时，能联系多个孤立要点，但这些要点是相互孤立的，彼此之间并无关联，未形成相关问题的知识网络。,SOLO分类评价法的五个层次及其具体表现,（4）关联结构层次。学生在回答问题时，能够联想问题的多个要点，并能将这多个要点联系起来，整合成一个连贯一致的整体，说明学生真正理解了这个问题。（5）拓展抽象结构层次。学生在回答问题时，能够进行抽象概括，从理论的高度分析问题，而且能够深化问题，使问题本身的意义得到拓展。,二、考试命题的四度,从高考性质谈起：高考是合

9、格的高中毕业生和具有同等学力的考生参加的选拔性考试，高考应具有较高的信度、效度，必要的区分度和适当的难度。,考试的信度指测量结果或评价结果之间的一致性程度。也就是测量结果是否真实、客观地反映了考生的实际水平。无论是量的稳定性，还是质的分析判断，高信度的测验或评价表意味着具有较好的误差控制能力。因此，信度是反映测量或评价表性能的一个重要的质量指标。信度高低可以用信度系数r来表示，其值在0到1之间。,（一）考试的信度,具体而言，可以从以下三方面来理解测量的信度。,1.信度指实测值与真值相差的程度 测量的目的之一，就是希望通过测量得到的实测值能够接近事物的真实值。由于各种原因，实测值一般不会完全等于

10、真实值，两者之差称为测量误差。测量误差越小，测量的信度就越高。用一个等式表示如下：,2.信度指统计量与参数之间的接近程度,统计量和参数是统计学中的两个基本概念。统计量是指样本上的各种数字特征（如样本的平均数、标准差等），参数是总体上的各种数字特征（如总体的平均数、标准差等）。统计量越接近参数，这个统计量的可靠性就越高，因此，信度就越高。要知道统计量对参数的接近程度，可以对参数进行区间估计。这种方法对估计真分数也很有用的。但这种理解也无法计算出信度。,3.信度指两次重复测量或等值测量之间的关联程度,如果对同一对象进行两次重复测量或者等值测量以后，计算两次测量的相关系数，相关系数越高，说明测量的信

11、度就越高；反之，就越低。对于信度的这种理解，有利于信度的计算。但重复测量会受到被测对象的经验、知识增长等因素的影响，等值测量又较难编制，因此，采用这种方法计算信度时，也是有误差的。,信度是任何一个测量的必要条件，对于教育测量来说，它具有更为重要的意义。因为教育测量的对象主要是精神现象，所测量的特性不易把握，为了能真实地反映测量对象的某种特点，需要更加注意测量的信度，从而正确地判断测量结果的价值。只有信度高的测量才能成为教育工作者有用的工具，否则，测量的结果是无意义的、无效的。,4.信度的理论公式,从以上公式可以看出，随机误差的方差越小，测量的信度就越高.信度的取值范围为0，1，如果测量误差的方

12、差为0，那么，测量的信度等于1，如果测量误差的方差等于观察分数的方差，则测量的信度为0.,5.信度的类型,（1）稳定性系数 稳定性系数又称重测信度。它是指用同一测验试卷，在先后两个不同时间内对同一组被测试卷，两次测验实得分数的相关系数。稳定性系数是估量信度最简单的方法，只需用同一份试卷对同一被测试卷测验两次即可。估计稳定系数的基本程序是：,（2）等值性系数,当同一测验的一种型式不能或不适合实施两次时，就需要采用该测验的另一平行型测验或者复份。决定等值系数的方法是。先实施第一次测验，然后在最短的时间内实施第二份等值的测验，再求它们得分的相关系数。这个相关系数即为信度的等值性系数。其基本程序为：,

13、（3）内部一致性系数,分半信度 这种方法是将一次测验分成两个假定相等而独立的两部分来记分，通常是以题目的奇数为一组，偶数为一组，计算两组的相关系数，最后用斯皮尔曼布朗公式校正，求得整个测验的信度系数。,库德尔理查德森公式法,用这种方法只需测验一次，然后以各个问题的正确反应数为基础，或根据各人总分的平均数和标准差，计算信度系数，常用的库德尔理查德森公式有 和,（4）论文式测验的信度系数,论文式测验的评分，没有严格的评分标准，以致同样的一个题目，不同的应试者的回答和得分都不一样，所以无法用前面的公式，而要用克龙巴赫所创的 系数公式：,（二）考试的效度,效度是指测量结果的准确性和有效性的程度，亦即测

14、量是否达到了预期的目的。考试的效度是指通过一次考试能确实地测量到它所欲测量的程度。因此，考试的效度既与考试本身属性有关，也与考试的用途与使用方法有关。离开考试用途，孤立地研究考试的效度是没有太大意义的。效度的概念在不断发展，效度的种类也因用途或研究方法的不同而不同。,1.考试的效度分类：内容效度、准则效度和结构效度。,（1）内容效度指的是测验题目对有关内容或行为取样的适用性，从而确定测验是否是所欲测量的行为领域的代表性取样。内容效度的评估方法 专家判断法;统计分析法（评分者信度复本信度折半信度再测法）;经验推测法（实验检验）,（2）准则效度指测量所得到的数据和其他被选择的变量（准则变量）的值相比是否有意义。同一概念可能有多种测量方法，假如其中一种成为准则另外一种就可以与之比较而判断其效度。（3）结构效度指测量结果体现出来的某种结构与测值之间的对应程度。结构效度分析所采用的方法是因子分析。最关心的问题是：量表实际测量的是哪些特征？在评价建构效度时，调研人员要试图解释“量表为什么有效”这一理论问题以及考虑从这一理论问题中能得出什么推论。结构效度包括同质效度、异质效度和语意逻辑效度。,2.效度的理论公式,3.信度与效度的关系,（1）信度是效度的必要条件，但不是充分条件。一个测量工