命题和试题质量分析
合集下载
相关主题
- 1、下载文档前请自行甄别文档内容的完整性，平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益，请联系客服反馈,我们会尽快为您处理(人工客服工作时间：9:00-18:30)。
（这里的权数：各题的满分值）
6
（三）试题难度的评价：
P≥0.9
－－－－很易
0.71≤P≤0.89 －－－－偏易
0.30≤P≤0.70 －－－－适中
0.11≤P≤0.29 －－－－偏难
P≤0.10
－－－－很难
7
（四）试题难度系数多大才适宜
1、理论上，大部分试题的难度系数P在0.5左右为宜。 为什么？ 因为P=0.5时方差最大，而方差最大时试题的鉴别力最大。
预备性测试中区分度差的题目，正式命题时应放弃类似题目。 预备性测试中区分度尚可的题目，正式命题时若要设计类似题目，则要
修改。 可见，区分度是试卷编造过程中筛选测题的主要依据。
19
2、通常情况下，区分度分析主要用于单一测题的分析，整份卷的区分度较 难分析。原因是难以找到衡量被试该能力水平的变量。
9
3、还要考虑到考生的实际情况 1）若不同层次考生差异性太大，特别是其中
的弱势群体人数较多时，考虑到教育公平， 试题难度应偏易。 2）要考虑考生学习信心和兴趣，及参与测试 的信心，试题难度可稍偏易。
10
1（、五根）未据考以试往，如考何试判定的试同题质的难性度题目的难度判定。 2、根据考试的目的、性质、内容及双向细目表 的要求进行质的分析。 3、挑选典型题目组成微型试题，进行正式考试 前的预备性测试，通过量的统计分析以确定试 题的难度。
13
❖ 二、区分度
（一）含义：区分度是试题(或试题中的某小题)区分出学生能力水平差异 的程度。
水平高者，成绩好；水平低者，成绩差。则区分度高。反之，则区分度低。
化学 题1
化学 题3
化学
题2
A
B
化学总分
C 化学总分
化学总分
以上A、B、C三图 哪道题
区分度较好？
14
****计算区分度时应考虑哪些问题？****
4
＝ P （二）难度系数的计算
X
k
考生编号
题1
题2
题3
题4
满分
1
10
10
29
1
1
4
1
19
2
0
9
5
28
3
1
6
3
18
4
1
5
1
13
5
1
10
5
26
难度
0.8
0.68
0.3
0.72
总分 50 25 42 28 20 42
5
1、题分难度计算： A）“1、0”记分题：P=通过人数 / 全体人数 B）非“1、0”记分题：P=平均分 / 该题满分 2、整卷难度计算： 方法1：P= 平均分 / 整卷满分 方法2：P= 各题难度系数加权后的平均数
将一份试卷中所有题目的区分度简单平均以计算整份试卷的区分度，此 做法缺乏科学依据。
将一份试卷中所有题目的区分度进行加权平均以计算整份试卷的区分度， 此做法亦缺乏科学依据。
20
三、信度
某考试，数学科共有三道大题，5名考生得分如下。假设这次考试只有这五名考 生，求数学试题的信度。
考生编号
第一大题 第二大题 第三大题
15
（二）计算： 1、相关法：某题区分度＝该题得分与总分的相关系数
Σ rXY＝
(
X
－
i
X
)(Y－i Y
N *Sx *Sy
)
16
2、高低分组法：
D = PH - PL
高分组：参照变量成绩排前27%考生 PH ——高分组得分率： =高分组平均分 / 该题满分
低分组：参照变量成绩排后27%考生 PL ——低分组得分率： 低分组平均分 / 该题满分
总分
满分
10
10
30
50
1
4
1
19Βιβλιοθήκη Baidu
25
2
9
5
28
42
3
6
3
18
28
4
5
1
13
20
5
10
5
26
42
方差
21
目录
难度 区分度 信度 效度
22
三、信度 问：某人很可信。这里“可信”是什么意思？ 答：前面许下承诺，后面能坚守承诺，说到做 到 做人稳定性、一致性强。
（一）含义： 经过多次测试，所得结果的一致性程度 (假定多次测试期间，被试没发生任何变化）
(方差=p×q=0.5×0.5=0.25)
8
2、考虑考试目的 1) 学科考试（如期末考），取P=0.5左右为宜 2) 选拔类考试（如中考），录取率为多少，难度 系数也相应取多少。如：某次考试要从1000名考 生录取200名，录取率为0.2，则要求试题的难度系 数尽量达到0.2左右。 3) 诊断分类考试（如高中毕业考——目的是鉴别 毕业生），因对区分度要求不高，所以要根据诊断 要求具体确定难度系数。对这类考试，可取难度系 数为0.80，甚至更大值。
1
10
10
29
50
1
4
1
19
25
0
9
5
28
42
1
6
3
18
28
1
5
1
13
20
1
10
5
26
42
0.8
0.68
0.3
0.72
3
一、难度 （一）含义：难度指试题的难易程度。 问题：试题1的难度系数为0.86，
试题2的为0.41。哪份试题更难 些？ 结论： 难度系数越大，试题越容易； 难度系数越小，试题越难。
17
（三）区分度多大,才算一份好试题：
1、原则：区分度越大，测题越好
2、评价区分度的标准：
➢ D≥0.40
区分度很好
➢ 0.30≤D＜0.40 区分度良可
➢ 0.20≤D＜0.30 区分度尚可，但要修改
➢ D＜0.20
区分度差，必须淘汰
18
（四）区分度的运用
1、挑选典型题目组成微型试题，在正式考试前的进行预备性测试，计算出 每题的区分度，为正式命题提供依据。
A、计算区分度，必须对两列变量作分析。 计算两列变量的相关系数，即可得到区分度
B、要计算“某一题”的区分度，必须找到该题的参照变量——能衡量学生水 平高低的变量。本题可考虑把“化学总分”作是“化学卷某一题”的参照 变量。
C、若区分度较高，则表示：水平高者，则该题得分高；水平低者该题得分低。 这里将“化学总分”作为衡量学生水平高低的指标。
11
目录
难度 区分度 信度 效度
12
二、区分度
某次语文统考，5名考生得分如下。假设这次考试只有这五名考生，求各题 的区分度。
考生编号
满分 1 2 3 4 5
区分度
题1
题2
语文科总分
1
10
50
0
4
25
1
9
42
1
6
28
1
5
20
1
10
42
六科CEEB标准分总分 最高分900 300 868 413 420 639
教师培训讲座
命题和试题质量分析
Guangzhou University 2006
2006年9月25日
目录
难度 区分度 信度 效度
2
某考试，共有四道题，5名考生得分如下。假设这次考试只有这五名 考生，求各题的难度、整卷难度及难度分布%。
考生编号 满分 1 2 3 4 5 难度
题1
题2
题3
题4
总分
23
（二）信度的分类
●重测信度：用同一份试题对同一组考生考两次， 所得结果的一致性程度。（假定：该组考生在 两次考试期间内不会发生任何变化）
6
（三）试题难度的评价：
P≥0.9
－－－－很易
0.71≤P≤0.89 －－－－偏易
0.30≤P≤0.70 －－－－适中
0.11≤P≤0.29 －－－－偏难
P≤0.10
－－－－很难
7
（四）试题难度系数多大才适宜
1、理论上，大部分试题的难度系数P在0.5左右为宜。 为什么？ 因为P=0.5时方差最大，而方差最大时试题的鉴别力最大。
预备性测试中区分度差的题目，正式命题时应放弃类似题目。 预备性测试中区分度尚可的题目，正式命题时若要设计类似题目，则要
修改。 可见，区分度是试卷编造过程中筛选测题的主要依据。
19
2、通常情况下，区分度分析主要用于单一测题的分析，整份卷的区分度较 难分析。原因是难以找到衡量被试该能力水平的变量。
9
3、还要考虑到考生的实际情况 1）若不同层次考生差异性太大，特别是其中
的弱势群体人数较多时，考虑到教育公平， 试题难度应偏易。 2）要考虑考生学习信心和兴趣，及参与测试 的信心，试题难度可稍偏易。
10
1（、五根）未据考以试往，如考何试判定的试同题质的难性度题目的难度判定。 2、根据考试的目的、性质、内容及双向细目表 的要求进行质的分析。 3、挑选典型题目组成微型试题，进行正式考试 前的预备性测试，通过量的统计分析以确定试 题的难度。
13
❖ 二、区分度
（一）含义：区分度是试题(或试题中的某小题)区分出学生能力水平差异 的程度。
水平高者，成绩好；水平低者，成绩差。则区分度高。反之，则区分度低。
化学 题1
化学 题3
化学
题2
A
B
化学总分
C 化学总分
化学总分
以上A、B、C三图 哪道题
区分度较好？
14
****计算区分度时应考虑哪些问题？****
4
＝ P （二）难度系数的计算
X
k
考生编号
题1
题2
题3
题4
满分
1
10
10
29
1
1
4
1
19
2
0
9
5
28
3
1
6
3
18
4
1
5
1
13
5
1
10
5
26
难度
0.8
0.68
0.3
0.72
总分 50 25 42 28 20 42
5
1、题分难度计算： A）“1、0”记分题：P=通过人数 / 全体人数 B）非“1、0”记分题：P=平均分 / 该题满分 2、整卷难度计算： 方法1：P= 平均分 / 整卷满分 方法2：P= 各题难度系数加权后的平均数
将一份试卷中所有题目的区分度简单平均以计算整份试卷的区分度，此 做法缺乏科学依据。
将一份试卷中所有题目的区分度进行加权平均以计算整份试卷的区分度， 此做法亦缺乏科学依据。
20
三、信度
某考试，数学科共有三道大题，5名考生得分如下。假设这次考试只有这五名考 生，求数学试题的信度。
考生编号
第一大题 第二大题 第三大题
15
（二）计算： 1、相关法：某题区分度＝该题得分与总分的相关系数
Σ rXY＝
(
X
－
i
X
)(Y－i Y
N *Sx *Sy
)
16
2、高低分组法：
D = PH - PL
高分组：参照变量成绩排前27%考生 PH ——高分组得分率： =高分组平均分 / 该题满分
低分组：参照变量成绩排后27%考生 PL ——低分组得分率： 低分组平均分 / 该题满分
总分
满分
10
10
30
50
1
4
1
19Βιβλιοθήκη Baidu
25
2
9
5
28
42
3
6
3
18
28
4
5
1
13
20
5
10
5
26
42
方差
21
目录
难度 区分度 信度 效度
22
三、信度 问：某人很可信。这里“可信”是什么意思？ 答：前面许下承诺，后面能坚守承诺，说到做 到 做人稳定性、一致性强。
（一）含义： 经过多次测试，所得结果的一致性程度 (假定多次测试期间，被试没发生任何变化）
(方差=p×q=0.5×0.5=0.25)
8
2、考虑考试目的 1) 学科考试（如期末考），取P=0.5左右为宜 2) 选拔类考试（如中考），录取率为多少，难度 系数也相应取多少。如：某次考试要从1000名考 生录取200名，录取率为0.2，则要求试题的难度系 数尽量达到0.2左右。 3) 诊断分类考试（如高中毕业考——目的是鉴别 毕业生），因对区分度要求不高，所以要根据诊断 要求具体确定难度系数。对这类考试，可取难度系 数为0.80，甚至更大值。
1
10
10
29
50
1
4
1
19
25
0
9
5
28
42
1
6
3
18
28
1
5
1
13
20
1
10
5
26
42
0.8
0.68
0.3
0.72
3
一、难度 （一）含义：难度指试题的难易程度。 问题：试题1的难度系数为0.86，
试题2的为0.41。哪份试题更难 些？ 结论： 难度系数越大，试题越容易； 难度系数越小，试题越难。
17
（三）区分度多大,才算一份好试题：
1、原则：区分度越大，测题越好
2、评价区分度的标准：
➢ D≥0.40
区分度很好
➢ 0.30≤D＜0.40 区分度良可
➢ 0.20≤D＜0.30 区分度尚可，但要修改
➢ D＜0.20
区分度差，必须淘汰
18
（四）区分度的运用
1、挑选典型题目组成微型试题，在正式考试前的进行预备性测试，计算出 每题的区分度，为正式命题提供依据。
A、计算区分度，必须对两列变量作分析。 计算两列变量的相关系数，即可得到区分度
B、要计算“某一题”的区分度，必须找到该题的参照变量——能衡量学生水 平高低的变量。本题可考虑把“化学总分”作是“化学卷某一题”的参照 变量。
C、若区分度较高，则表示：水平高者，则该题得分高；水平低者该题得分低。 这里将“化学总分”作为衡量学生水平高低的指标。
11
目录
难度 区分度 信度 效度
12
二、区分度
某次语文统考，5名考生得分如下。假设这次考试只有这五名考生，求各题 的区分度。
考生编号
满分 1 2 3 4 5
区分度
题1
题2
语文科总分
1
10
50
0
4
25
1
9
42
1
6
28
1
5
20
1
10
42
六科CEEB标准分总分 最高分900 300 868 413 420 639
教师培训讲座
命题和试题质量分析
Guangzhou University 2006
2006年9月25日
目录
难度 区分度 信度 效度
2
某考试，共有四道题，5名考生得分如下。假设这次考试只有这五名 考生，求各题的难度、整卷难度及难度分布%。
考生编号 满分 1 2 3 4 5 难度
题1
题2
题3
题4
总分
23
（二）信度的分类
●重测信度：用同一份试题对同一组考生考两次， 所得结果的一致性程度。（假定：该组考生在 两次考试期间内不会发生任何变化）