试卷的分析与编制
合集下载
相关主题
- 1、下载文档前请自行甄别文档内容的完整性，平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益，请联系客服反馈,我们会尽快为您处理(人工客服工作时间：9:00-18:30)。
试卷信度与效度的关系wenku.baidu.com
可信的测验未必有效，而有效的测验必定可信
试题分析
• 定性分析： 主要着重试题的内容、形式和编写技术
的分析
• 定量分析： 主要是对难度、区分度、覆盖率及其权 • 试题信度： 重的分析
就是试卷测量结果的可靠性、一致性和稳定性；即测验结 果是否反映了受试者稳定的真实水平，也即试卷本身的可靠性 程度。对个体的绝对水平而言。
主干知识点
核心概念
知识点
试卷的信度
1.估计信度的方法： 再测信度、复本信度和分半信度
2.影响信度的因素： 试题的题量（最主要）、难度、区分度、
知识点的覆盖率、学生是否做过这类题（尤 其是难题）、考试环境、考生状况等。
信度系数=真分数方差÷实测分数方差 ， 受随机误差的影响但不受规律（系统）误差 影响。信度系数达0.9以上的为高信度试卷。
度相一致，既能让学生有成就感，同时又感 到不足，会产生继续努力的强烈愿望
• ……
试卷分析
• 定性分析： 其依据是课程目标和考试说明，主要着
重试题的内容、形式和编写技术的分析
• 定量分析： 主要是对难度、区分度、覆盖率及其权 • 试题信度分析：重的分析
就是试卷测量结果的可靠性、一致性和稳定性；即测验结 果是否反映了受试者稳定的真实水平，也即试卷本身的可靠性 程度。对个体的绝对水平而言。
2.内容难度值的计算： 由几位有经验的教师逐 题分别评判其难度值，再统计这几位教师的 均值作为内容难度值。
定量分析
• 试题的区分度分析：取值范围为+1～-1 区分度的鉴别指数：D＝PH-PL
PH和PL分别是全卷总分最高和最低的27% 考生在该题的通过率。
D值1～0.4、0.4～0.3、0.3～0.2、0.2～-1
处膜的K+通道 关闭 。应该有更多的打开，误读 教材
• 切除尖端的幼苗不生长也不弯曲。不一定，误读 教材
• 种群都具有性比和年龄结构。不一定 • 氧气分子从血液进入到肝细胞中被利用，至少需
要经过 12 层磷脂分子。8，超纲了吧？ • B细胞的一个抗原受体能与 2 个抗原结合。1或2，
超纲了吧？
凭空捏造！
• 内容：试题内容是否能体现课标的要求， 是否与考试目的相一致；是否有偏题、怪 题、错题；知识点的覆盖程度，以及是否 凸现了主干知识和核心概念。 考试目的：水平考试和选拔考试，模拟考 试和阶段性考试（单元、期中、期末考试）
• 上图指针偏转是否正确？不能肯定，误读教材 • 在某一质膜处发生动作电位的去极化过程中，该
试卷的分析与编制
• 试卷分析 • 试卷编制 • 理综生物模拟卷编制的建议 2013年4月1日
试卷的分析与编制
• 试卷分析
定性分析和定量分析 试题信度分析和试题效度分析
试卷的功能
• 体现课标，能给予学生以正能量 • 指导功能：指导教师施教、指导学生学习 • 检测功能：检测教学效果、检测学习效果 • 反馈功能：即查漏补缺 • 巩固功能：对学生的学习有很好的巩固作用 • 鼓励功能：试卷的难易程度与学生的学习程
试卷的效度
1.内容效度 指这份试卷内容在覆盖面、各内容 的题量及其难度上符合课程标准和考试说明的 程度。在命题时，通过制作命题双向细目表的 办法进行控制。
2.预测效度 例如，用高考的成绩来预测入学后 的考生学习情况时，如果预测的准确度高，说 明这份试卷的预测效度较好。
3.影响效度的因素 受信度、试题与课程标准一 致性、试题的难度水平或比例的影响。
• 编写技术：分析以下方面能做到的程度 1.编制形式：创作正确，改编合理，选编要尽量避免学生做 过的题
2.试题内容表达：表达要准确、清楚而不含糊，科学而不凭 空想象，易懂而不深奥
3.试题内容设计：不出现以测试非生物专业为主的内容，如 非必要的复杂推理和计算
4.一道题的内容范围：只测试一个问题或围绕一个中心 5.题干陈述：尽量少用否定式，题干要简明且有意义 6.备选项设计：在长度、结构和语言表述上尽量一致；备选 项是数字，要按上升或下降的次序排列
• 内容：试题内容是否与考试目的相一致；是 否有偏题、怪题、错题；知识点的覆盖程度， 以及是否凸现了主干知识和核心概念。 考试目的：水平考试和选拔考试，模拟考 试和阶段性考试（单元、期中、期末考试）。 水平考试也可称为诊断性考试。
• 形式：题型有哪些，是否有文字、图表、图 形、曲线等形式。
定性分析
• 2010年海南省高考理综第25题，题意是：葡萄发
酵可产生葡萄酒。将新鲜葡萄榨成汁后分别装入
甲、乙发酵瓶中，在温度等适宜的条件下进行发
酵，如图3所示。其参考答案认为：甲、乙装置中
实际得到的发酵产品分别是 葡萄醋（或称果醋）
和 葡萄酒（或称果酒） 。
葡萄酒
定性分析
着重试题的内容、形式和编写技术的评析
• 试题效度：
就是测量结果的有效性，是指利用试卷通过考试能够准确 测出每一位考生能力相对高低的准确程度。测量结果与考生实 际能力相对高低越吻合，则效度越高。效度的大小能反映依据 这次考试分数能推测每一位学生能力相对高低的准确程度。对 一个群体中的不同个体间的区分是否有效。
7.备选项内容关系：逻辑上不相交，要相离，可包涵 8.整卷中正确选项的排列：随机分布
定量分析
主要是对难度和区分度的分析
• 试题的难度分析：包括统计难度和内容难度， 依据于考试的学生水平。
1.统计难度值的计算：以试题的通过率P表示
目前普遍认为，试题的难、中、易，对应于 统计难度值P是0～0.4、0.4～0.7、0.7～1.0 。
• 试题效度分析：
就是测量结果的有效性，是指利用试卷通过考试能够准确 测出每一位考生能力相对高低的准确程度。测量结果与考生实 际能力相对高低越吻合，则效度越高。效度的大小能反映依据 这次考试分数可以推测每一位学生能力相对高低的准确程度。 对一个群体中的不同个体间的区分是否有效。
定性分析
着重试题的内容、形式和编写技术的评析
分别表示该题的区分度为很好、良好、尚好 （如果是选拔性考试，需修改）、差（淘汰）。
• 区分度与难度的关系：难度值很高或很低，该 题的区分度就很低；难度值0.5时，区分度可 能最大。
• 试题的特征曲线
定量分析
试题在知识点上的覆盖率
• 知识点数量及覆盖率 • 主干知识点的覆盖及其比率 • 核心概念的覆盖及其比率
可信的测验未必有效，而有效的测验必定可信
试题分析
• 定性分析： 主要着重试题的内容、形式和编写技术
的分析
• 定量分析： 主要是对难度、区分度、覆盖率及其权 • 试题信度： 重的分析
就是试卷测量结果的可靠性、一致性和稳定性；即测验结 果是否反映了受试者稳定的真实水平，也即试卷本身的可靠性 程度。对个体的绝对水平而言。
主干知识点
核心概念
知识点
试卷的信度
1.估计信度的方法： 再测信度、复本信度和分半信度
2.影响信度的因素： 试题的题量（最主要）、难度、区分度、
知识点的覆盖率、学生是否做过这类题（尤 其是难题）、考试环境、考生状况等。
信度系数=真分数方差÷实测分数方差 ， 受随机误差的影响但不受规律（系统）误差 影响。信度系数达0.9以上的为高信度试卷。
度相一致，既能让学生有成就感，同时又感 到不足，会产生继续努力的强烈愿望
• ……
试卷分析
• 定性分析： 其依据是课程目标和考试说明，主要着
重试题的内容、形式和编写技术的分析
• 定量分析： 主要是对难度、区分度、覆盖率及其权 • 试题信度分析：重的分析
就是试卷测量结果的可靠性、一致性和稳定性；即测验结 果是否反映了受试者稳定的真实水平，也即试卷本身的可靠性 程度。对个体的绝对水平而言。
2.内容难度值的计算： 由几位有经验的教师逐 题分别评判其难度值，再统计这几位教师的 均值作为内容难度值。
定量分析
• 试题的区分度分析：取值范围为+1～-1 区分度的鉴别指数：D＝PH-PL
PH和PL分别是全卷总分最高和最低的27% 考生在该题的通过率。
D值1～0.4、0.4～0.3、0.3～0.2、0.2～-1
处膜的K+通道 关闭 。应该有更多的打开，误读 教材
• 切除尖端的幼苗不生长也不弯曲。不一定，误读 教材
• 种群都具有性比和年龄结构。不一定 • 氧气分子从血液进入到肝细胞中被利用，至少需
要经过 12 层磷脂分子。8，超纲了吧？ • B细胞的一个抗原受体能与 2 个抗原结合。1或2，
超纲了吧？
凭空捏造！
• 内容：试题内容是否能体现课标的要求， 是否与考试目的相一致；是否有偏题、怪 题、错题；知识点的覆盖程度，以及是否 凸现了主干知识和核心概念。 考试目的：水平考试和选拔考试，模拟考 试和阶段性考试（单元、期中、期末考试）
• 上图指针偏转是否正确？不能肯定，误读教材 • 在某一质膜处发生动作电位的去极化过程中，该
试卷的分析与编制
• 试卷分析 • 试卷编制 • 理综生物模拟卷编制的建议 2013年4月1日
试卷的分析与编制
• 试卷分析
定性分析和定量分析 试题信度分析和试题效度分析
试卷的功能
• 体现课标，能给予学生以正能量 • 指导功能：指导教师施教、指导学生学习 • 检测功能：检测教学效果、检测学习效果 • 反馈功能：即查漏补缺 • 巩固功能：对学生的学习有很好的巩固作用 • 鼓励功能：试卷的难易程度与学生的学习程
试卷的效度
1.内容效度 指这份试卷内容在覆盖面、各内容 的题量及其难度上符合课程标准和考试说明的 程度。在命题时，通过制作命题双向细目表的 办法进行控制。
2.预测效度 例如，用高考的成绩来预测入学后 的考生学习情况时，如果预测的准确度高，说 明这份试卷的预测效度较好。
3.影响效度的因素 受信度、试题与课程标准一 致性、试题的难度水平或比例的影响。
• 编写技术：分析以下方面能做到的程度 1.编制形式：创作正确，改编合理，选编要尽量避免学生做 过的题
2.试题内容表达：表达要准确、清楚而不含糊，科学而不凭 空想象，易懂而不深奥
3.试题内容设计：不出现以测试非生物专业为主的内容，如 非必要的复杂推理和计算
4.一道题的内容范围：只测试一个问题或围绕一个中心 5.题干陈述：尽量少用否定式，题干要简明且有意义 6.备选项设计：在长度、结构和语言表述上尽量一致；备选 项是数字，要按上升或下降的次序排列
• 内容：试题内容是否与考试目的相一致；是 否有偏题、怪题、错题；知识点的覆盖程度， 以及是否凸现了主干知识和核心概念。 考试目的：水平考试和选拔考试，模拟考 试和阶段性考试（单元、期中、期末考试）。 水平考试也可称为诊断性考试。
• 形式：题型有哪些，是否有文字、图表、图 形、曲线等形式。
定性分析
• 2010年海南省高考理综第25题，题意是：葡萄发
酵可产生葡萄酒。将新鲜葡萄榨成汁后分别装入
甲、乙发酵瓶中，在温度等适宜的条件下进行发
酵，如图3所示。其参考答案认为：甲、乙装置中
实际得到的发酵产品分别是 葡萄醋（或称果醋）
和 葡萄酒（或称果酒） 。
葡萄酒
定性分析
着重试题的内容、形式和编写技术的评析
• 试题效度：
就是测量结果的有效性，是指利用试卷通过考试能够准确 测出每一位考生能力相对高低的准确程度。测量结果与考生实 际能力相对高低越吻合，则效度越高。效度的大小能反映依据 这次考试分数能推测每一位学生能力相对高低的准确程度。对 一个群体中的不同个体间的区分是否有效。
7.备选项内容关系：逻辑上不相交，要相离，可包涵 8.整卷中正确选项的排列：随机分布
定量分析
主要是对难度和区分度的分析
• 试题的难度分析：包括统计难度和内容难度， 依据于考试的学生水平。
1.统计难度值的计算：以试题的通过率P表示
目前普遍认为，试题的难、中、易，对应于 统计难度值P是0～0.4、0.4～0.7、0.7～1.0 。
• 试题效度分析：
就是测量结果的有效性，是指利用试卷通过考试能够准确 测出每一位考生能力相对高低的准确程度。测量结果与考生实 际能力相对高低越吻合，则效度越高。效度的大小能反映依据 这次考试分数可以推测每一位学生能力相对高低的准确程度。 对一个群体中的不同个体间的区分是否有效。
定性分析
着重试题的内容、形式和编写技术的评析
分别表示该题的区分度为很好、良好、尚好 （如果是选拔性考试，需修改）、差（淘汰）。
• 区分度与难度的关系：难度值很高或很低，该 题的区分度就很低；难度值0.5时，区分度可 能最大。
• 试题的特征曲线
定量分析
试题在知识点上的覆盖率
• 知识点数量及覆盖率 • 主干知识点的覆盖及其比率 • 核心概念的覆盖及其比率