考试的质量分析
—— 155370 林妙红
作业要求
作业类型:案例分析
本作业主要让学习者掌握试题试卷分析的基本方法,如考试的信度、效度、难度和区分度,通过案例分析让学习者在实际工作中能进行考试的定量化分析。
案例呈现:
1.宝鸡市高三教学质量检测(二)语文试卷分析(见李维民主编)《考试命题技术与解题技巧》陕西师大出版社2011年。
2.西安科技大学试卷分析报告(见李维民主编《考试命题技术与解题技巧》陕西师大出版社2011年。
3.刘新平编《教育统计与测评导论》科学出版社(2003第七章 §7.1 例2、3 §7.2例1。 问题:案例中主要的难点是如何计算测验的信度、效度、难度、区分度并对这四个度的联系与区别加以阐述,从而给出试卷分析报告以供管理人员参考。
讨论:
1.信度、效度、难度、区分度的定义及应用范围。
2.结合教学实践如何撰写试卷分析报告。
3.试卷分析报告如何与定性分析结合。
案例总结报告:案例的理论依据主要是测验质量分析中“四度”的概念,关键是公式的计算,如何结合工作实际撰写每门课程考试的质量分 析报告,并根据报告指出在课程教学及考试命题中如何改进考试工作。
一、信度、效度、难度、区分度的定义及应用范围。
信度
信度是指考试的可靠性,即考试结果的可信程度。信度高的试题很少受到外部因素的影响,对任何学生的多次测定都会产生比较稳定的、前后一致的结果。提高试卷信度的因素大致可包括以下几种情况:
(1)使用ABC卷随机抽取试题。
(2)教师考前没有划定考试范围。
(3)试题效度高,质量可靠。
(4)考试保密措施可靠。
(5)严格执行考试纪律。
(6)阅卷标准严格、规范、统一。
(7)集体阅卷且实行流水作业,复核认真。
效度
效度指考试的准确性,反映的是考试内容与教学大纲或考试大纲的吻合程度。效度高的试卷,能够较准确地测试出学生掌握和运用所学知识的真实度。根据教学大纲或考试大纲进行命题,且各单元试题分数分配与学时数分配基本保持一致,成正比关系,这是保证考试效度的基础。其它影响效度的因素有:是否在命题的同时制订了试题参考答案与评分标准;是否集体阅卷且实行流水作业;复核是否认真;分数是否真实等。
难度
难度反映试题的难易程度,即考生在一个试题或一份试卷中的失分程度。如满分100分的试题,考生平均得分76分,平均失分24分,则难度系数为0.24。其计算公式为:
L=1—X/W
其中,L为难度系数,X为分析组平均得分,W为试卷总分(一般为100分) 区分度
区分度反映试题区分不同水平受试者的程度,即考出学生的不同水平,把优秀、一般、差三个层次的学生真正分别开。区分度高的考试,优秀、一般、差三个层次的学生都有一定比例,如果某一分数区间学生相对集中,高分太多或不及格太多的考试,区分度则低。如果把成绩从高往低排序,前50%的考生为高分组,后50%为低分组,其计算公式为:
D=2(XH—XL)/W
其中,D为区分度,XH为高分组平均分,XL为低分组平均分,W为试卷总分(一
般为100分)。
二、.结合教学实践如何撰写试卷分析报告
试卷的分析报告是对一次考试中质量分析的文字总结。写试卷分析报告,是考试工作必不可少的重要环节。
一份试卷分析报告,一般包括以下四个方面的内容:
1、对试卷内容的分析。包括试题质量的高低、试题难度是否适宜、重点的比重、覆盖的知识面是否到位等。
2、对学生答题情况的分析。包括数据分析和实例分析。数据分析中,应包括各题的得分情况,得分比例;实例分析中,应包括每一试题答题的具体实例。典型错题的答题情况作定量分析,学生掌握和运用知识的能力作定性分析。
3、得失分原因分析。应包括分析得分高的原因和得分低的原因。通过分析得失原因,以总结教与学两个方面的经验,并找出存在的问题及剖析产生这些问题的原因。
4、试卷分析过程应该要注意的
一是目标明确。即要围绕考试的目的进行。因此分析的内容要有针对性。 二是真实具体。所列数据,应是抽样的准确数据;所举实例,要典型具体,应体现大部分学生答题的情况。
三是突出重点。对试卷内容和试卷中出现的问题的原因,要抓住重点,突出关键所在。提出建议和解决问题的措施,应从实际出发,抓住共性,突出重点。
四要注重实效。进行试卷分析,其目的之一是为了查找教学中的问题,因此应该从教学的实际出发,对查找出的问题应持积极的态度进行解决。
总之,考试后要进行全校性质量分析,通过对考试成绩的横向对照和纵向的质量追踪,找出差距和存在的问题,及时采取相应的措施,通过找差距,强化教师的责任感和质量意识,尽可能使各年级的成绩在原有基础上有新的提高。在今后的有限教学时间里,优化教学,完善教学管理,查缺补漏,全面提高教学质量。
三.试卷分析报告如何与定性分析结合。
试卷分析是每次考试结束以后教师试卷结构、学生考试状况的一种综合分析,是一种客观的教学反思行为。其中包括对教师前一阶段教的情况的反思,对学生前一阶段学的情况的反思,对本次考试的反思,同时也是对教师命题水平的反思。
定性分析就是对研究对象进行“质”的方面的分析。具体地说是运用归纳和演绎、分析与综合以及抽象与概括等方法,对获得的各种材料进行思维加工,从而能去粗取精、去伪存真、由此及彼、由表及里,达到认识事物本质、揭示内在规律。
试卷分析报告通过“一查,二统,三找,四改” 发现教学中存在的主要问题,制定今后的教学改进措施。提高教师制卷水平,也有助于充分获得考试提供的教学反馈信息,促进我们对教学过程的反思,从而为改进教学提供依据。 但是试题分析报告应该定性分析与定量分析相结合。光定性说一些看法、观点,没有数量的分析不行。要有科学统计的数据,定性与定量结合。例如,既要计算出每道题的得失分率,也要分析得失分的原因。
考试的质量分析
—— 155370 林妙红
作业要求
作业类型:案例分析
本作业主要让学习者掌握试题试卷分析的基本方法,如考试的信度、效度、难度和区分度,通过案例分析让学习者在实际工作中能进行考试的定量化分析。
案例呈现:
1.宝鸡市高三教学质量检测(二)语文试卷分析(见李维民主编)《考试命题技术与解题技巧》陕西师大出版社2011年。
2.西安科技大学试卷分析报告(见李维民主编《考试命题技术与解题技巧》陕西师大出版社2011年。
3.刘新平编《教育统计与测评导论》科学出版社(2003第七章 §7.1 例2、3 §7.2例1。 问题:案例中主要的难点是如何计算测验的信度、效度、难度、区分度并对这四个度的联系与区别加以阐述,从而给出试卷分析报告以供管理人员参考。
讨论:
1.信度、效度、难度、区分度的定义及应用范围。
2.结合教学实践如何撰写试卷分析报告。
3.试卷分析报告如何与定性分析结合。
案例总结报告:案例的理论依据主要是测验质量分析中“四度”的概念,关键是公式的计算,如何结合工作实际撰写每门课程考试的质量分 析报告,并根据报告指出在课程教学及考试命题中如何改进考试工作。
一、信度、效度、难度、区分度的定义及应用范围。
信度
信度是指考试的可靠性,即考试结果的可信程度。信度高的试题很少受到外部因素的影响,对任何学生的多次测定都会产生比较稳定的、前后一致的结果。提高试卷信度的因素大致可包括以下几种情况:
(1)使用ABC卷随机抽取试题。
(2)教师考前没有划定考试范围。
(3)试题效度高,质量可靠。
(4)考试保密措施可靠。
(5)严格执行考试纪律。
(6)阅卷标准严格、规范、统一。
(7)集体阅卷且实行流水作业,复核认真。
效度
效度指考试的准确性,反映的是考试内容与教学大纲或考试大纲的吻合程度。效度高的试卷,能够较准确地测试出学生掌握和运用所学知识的真实度。根据教学大纲或考试大纲进行命题,且各单元试题分数分配与学时数分配基本保持一致,成正比关系,这是保证考试效度的基础。其它影响效度的因素有:是否在命题的同时制订了试题参考答案与评分标准;是否集体阅卷且实行流水作业;复核是否认真;分数是否真实等。
难度
难度反映试题的难易程度,即考生在一个试题或一份试卷中的失分程度。如满分100分的试题,考生平均得分76分,平均失分24分,则难度系数为0.24。其计算公式为:
L=1—X/W
其中,L为难度系数,X为分析组平均得分,W为试卷总分(一般为100分) 区分度
区分度反映试题区分不同水平受试者的程度,即考出学生的不同水平,把优秀、一般、差三个层次的学生真正分别开。区分度高的考试,优秀、一般、差三个层次的学生都有一定比例,如果某一分数区间学生相对集中,高分太多或不及格太多的考试,区分度则低。如果把成绩从高往低排序,前50%的考生为高分组,后50%为低分组,其计算公式为:
D=2(XH—XL)/W
其中,D为区分度,XH为高分组平均分,XL为低分组平均分,W为试卷总分(一
般为100分)。
二、.结合教学实践如何撰写试卷分析报告
试卷的分析报告是对一次考试中质量分析的文字总结。写试卷分析报告,是考试工作必不可少的重要环节。
一份试卷分析报告,一般包括以下四个方面的内容:
1、对试卷内容的分析。包括试题质量的高低、试题难度是否适宜、重点的比重、覆盖的知识面是否到位等。
2、对学生答题情况的分析。包括数据分析和实例分析。数据分析中,应包括各题的得分情况,得分比例;实例分析中,应包括每一试题答题的具体实例。典型错题的答题情况作定量分析,学生掌握和运用知识的能力作定性分析。
3、得失分原因分析。应包括分析得分高的原因和得分低的原因。通过分析得失原因,以总结教与学两个方面的经验,并找出存在的问题及剖析产生这些问题的原因。
4、试卷分析过程应该要注意的
一是目标明确。即要围绕考试的目的进行。因此分析的内容要有针对性。 二是真实具体。所列数据,应是抽样的准确数据;所举实例,要典型具体,应体现大部分学生答题的情况。
三是突出重点。对试卷内容和试卷中出现的问题的原因,要抓住重点,突出关键所在。提出建议和解决问题的措施,应从实际出发,抓住共性,突出重点。
四要注重实效。进行试卷分析,其目的之一是为了查找教学中的问题,因此应该从教学的实际出发,对查找出的问题应持积极的态度进行解决。
总之,考试后要进行全校性质量分析,通过对考试成绩的横向对照和纵向的质量追踪,找出差距和存在的问题,及时采取相应的措施,通过找差距,强化教师的责任感和质量意识,尽可能使各年级的成绩在原有基础上有新的提高。在今后的有限教学时间里,优化教学,完善教学管理,查缺补漏,全面提高教学质量。
三.试卷分析报告如何与定性分析结合。
试卷分析是每次考试结束以后教师试卷结构、学生考试状况的一种综合分析,是一种客观的教学反思行为。其中包括对教师前一阶段教的情况的反思,对学生前一阶段学的情况的反思,对本次考试的反思,同时也是对教师命题水平的反思。
定性分析就是对研究对象进行“质”的方面的分析。具体地说是运用归纳和演绎、分析与综合以及抽象与概括等方法,对获得的各种材料进行思维加工,从而能去粗取精、去伪存真、由此及彼、由表及里,达到认识事物本质、揭示内在规律。
试卷分析报告通过“一查,二统,三找,四改” 发现教学中存在的主要问题,制定今后的教学改进措施。提高教师制卷水平,也有助于充分获得考试提供的教学反馈信息,促进我们对教学过程的反思,从而为改进教学提供依据。 但是试题分析报告应该定性分析与定量分析相结合。光定性说一些看法、观点,没有数量的分析不行。要有科学统计的数据,定性与定量结合。例如,既要计算出每道题的得失分率,也要分析得失分的原因。