第五讲 编制

注意：通过率与难度呈反向变化。 难度是相对的。
第一节 项目的难度
二、难度计算方法 （一）二分法记分的项目（0分/ｎ分）
项 目 分 析
被试人数较少时，直接用公式计算 被试人数较多时，分组计算平均通过率
分组：根据测验总成绩，分数最高的27％被试为高 分组，分数最低的27％被试为低分组，中间46％的被 试为中间组。
PH + PL P = ———— 2
P：平均通过率 PH和PL分别代表高分组和低分组通过率
第一节 项目的难度
举例
项 目 分 析
1.回答某题时，10名被试中8人答对，其难度 有多大？ 2.某测验条目高分组通过率为85％，中间组通ห้องสมุดไป่ตู้过率为52％，低分组通过率为35％，问平均 通过率是多少？
第一节 项目的难度
Xmax：该题的满分。
第一节 项目的难度
三、难度水平的确定
项 目 分 析
（一）项目的难度 进行难度分析的主要目的是为了筛选项目， 项目的难度多高合适，取决于测验的目的、性 质以及项目的形式。
理论上，P值越接近于0或接近于１，越 无法区分被试间能力的差异。相反，P值越接 近于O.50，区别力越高。通常，试题的难度 在0.5±0.2之间。
例：直接从测验上得到的分数叫做________。 简述心理测验的性质。
测 验 编 制 的 一 般 程 序
如果是填充形式，空格不宜太多，空出来 的应是关键词句 每题应只有一个正确答案，且答案简短。 对不完整的答案，应规定评分标准
第二节 测题的编写
（四）操作题的编制要领
测 验 编 制 的 一 般 程 序
考察被试概念和原理的记忆，适于用简答题 考察对事物的辨别和判断，适于用选择题 考察综合运用知识的能力，则适于用论述题
测 验 编 制 的 一 般 程 序
（2）接受测验的团体的特点
幼儿；文盲；聋哑
（3）各种实际因素
人数、测验时间、经费等
第二节 测题的编写
四、各型测题的编制要领
提供型题目：要求被试给出正确答案，如论述 题、简答题、填充题等； 选择型题目：要求被试在有限的几个答案中选 择正确的答案，如选择题、是非题、匹配 题等。
1 1 1 1 1 0 0
总分 被试
4 4 4 4 3 3 3 17 18 19 20 21 22 23
题1
1 1 1 0 1 1 0
题2
1 0 1 1 1 0 1
题3
0 1 0 1 0 0 0
题4
0 0 0 0 0 0 0
总分
2 2 2 2 2 1 1
8
9 10 11 12 13 14 15 16
第一节 测验的目标分析
小学自然常识测验编写计划
测 验 编 制 的 一 般 程 序
第二节 测题的编写
一、收集材料
（一）收集材料的原则 资料要丰富 资料要有普遍性
（二）材料的来源 已出版的标准测验 理论和专家的经验 临床观察和记录
测 验 编 制 的 一 般 程 序
第二节 测题的编写
二、编制测题的一般原则
测 验 编 制 的 一 般 程 序
（一）内容方面
①符合测验的目；②有代表性；③相互独立。
（二）文字方面
规范、通俗、简明。
（三）理解方面
容易理解，不产生歧义。
（四）社会敏感性方面
尽量回避，或委婉、鼓励、间接。
第二节 测题的编写
三、选择测题的形式
需要考虑以下几点： （1）测验的目的和材料的性质
第一节 测验的目标分析
一、测验对象
明确测验编成后要用于哪些团体？（年龄、 性别、职业„„）
测 验 编 制 的 一 般 程 序
二、测验的用途
编出的测验是要对被试做描述，还是做诊 断，亦或是选拔和预测？
显示性测验 预测性测验
第一节 测验的目标分析
三、测验的目标
测 验 编 制 的 一 般 程 序
编制的测验是测量什么心理变量或行为特 征？ 目标分析过程 确定要测量的心理特征和行为 对特定概念下定义 确定测验的具体内容 如选择哪些方面的题 目以及各题目所占的比例 建立评价测验结果的效标或标准。
第二节 项目的区分度
二、区分度的计算
项 目 分 析
项目区分度是以项目得分高低与实际能 力水平高低之间的相关来表示的。被试的实 际能力水平是很难测量的，一般用测验总分 代替。
第二节 项目的区分度
（一）鉴别指数法
计算的主要步骤如下： 1.按测验总分高低排列答卷； 2.确定高分组与低分组，每一组取答卷总数的27％； 3.分别计算高分组与低分组在该项目上的通过率或得 分率； 4.按下列公式估计出项目的鉴别指数。
题目的说明必须清楚明白
第三节 预测与项目分析
一、预测（预试验）
预测应注意以下几个问题： 预测对象应取自将来正式测验应用的群体 预测的实施过程与情境应与正式测验相近 预测的时限可稍宽，最好使每个被试都能 将题目做完 详细记录被试在预测过程中的反应 二、项目分析
测 验 编 制 的 一 般 程 序
第四节 合成测验
人 数 人 数 人 数
项 目 分 析
分数
分数
分数
正偏态分布
正态分布
负偏态分布
测验分数的分布
第二节 项目的区分度
一、区分度定义
项 目 分 析
项目区分度，也叫鉴别力，是指测验项目 对被试心理特性差异的区分能力。是评价项目 质量和筛选项目的重要指标。
如果一个项目，实际水平高的被试能顺利通过， 而实际水平低的被试不能通过，那么我们就可以认为 该项目有较高的区分度。 区分度是一种相关程度，理论上取值范围介于一1 至+l之间。实际上，不可能出现负相关，所以，区分 度的取值范围在０～+l之间。
指导手册的内容： l.测验的对象、目的和功用 2.测验编制的理论依据及编制方法 3.测验实施说明 4.测验试题的标准答案和记分标准 5.常模资料 6.测验的基本特征，包括难度、鉴别力、信 度、效度和因素分析的资料，及这些资料 取得的条件和情境等。
点二列相关法 二列相关法 φ 相关法
第二节 项目的区分度
三、区分度与难度的关系
通过率Ｐ 难度
0.00 0.10 0.20 0.30 0.40 0.50 0.60 0.70 0.80 0.90 1.00
区分度Ｄ
0.00 0.20 O.40 0.60 0.80 1.00 0.80 O.60 0.40 O.20 O.00
项目分析目的:
通过选择和修改测验题目，提高测验的信 度和效度。
第一节 项目的难度
一、难度定义
项 目 分 析
难度是指项目的难易程度。 在能力测验中，用“通过率”反映。 在非能力测验中，用“通俗性”反映。
R P = ——×100% N
P:代表项目的通过率；N:为全体被试者人数； R:为答对或通过某项目的人数。
教 学 内 容
第 五 讲 测 验 的 编 制
第一部分 项目分析 第一节 项目的难度 第二节 项目的区分度 第二部分 第一节 第二节 第三节 第四节 测验编制的一般程序 测验的目标分析 测题的编写 预测与项目分析 合成测验
项目分析内容:
定性分析：测验的内容效度、题目编写的恰
项 目 分 析
当性和有效性等。 定量分析：对题目的难度和区分度进行分析
第一节 项目的难度
希望能测量个体差异的测验，项目的通过率 应接近于0.5。 用于选拔的测验，应选择通过率接近录取率 的项目。 用于诊断或筛选出少数较差被试的测验，题 目通过率应该高。
项 目 分 析
第一节 项目的难度
（二）测验的难度 测验的难度直接依赖于组成测验的项目的 难度。通过考察测验分数的分布。可以对测验 的难度做出直观检验。
测 验 编 制 的 一 般 程 序
第二节 测题的编写
（一）选择题的编制要领
例：最早使用测验选拔人才的国家是( )。 A.法国 B.英国 C.中国 D.美国
测 验 编 制 的 一 般 程 序
题干明确，意义完整 选项简明扼要 每题只给一个正确答案（单选题） 各选项长度尽量相等 避免题干含有选择答案的线索 选项最好用同一形式，随机排列
1
1 1 1 1 1 1 1 0
1
1 1 1 1 0 0 1 1
0
1 0 1 0 1 0 0 1
1
0 1 0 0 0 1 0 0
3
3 3 3 2 2 2 2 2
24
25 26 27 28 29 30 31 32
1
0 0 1 0 0 0 0 0
0
1 0 0 1 0 0 0 0
0
0 1 0 0 0 0 0 0
两种常见的排列方式：
并列直进式：先按维度分类，后按难度排列。 混合螺旋式：先将测题依难度分成不同的层次， 再将不同性质的试题交叉排列，难度渐次升进。
第四节 合成测验
三、信度与效度的评估 前文已述 四、常模制定 前文已述
测 验 编 制 的 一 般 程 序
第四节 合成测验
五、测验指导手册
测 验 编 制 的 一 般 程 序
项 目 分 析
D = PH - PL
（1≥D≥０）
D：鉴别指数 ＰＨ：高分组在该项目上的通过率或得分率 ＰＬ：低分组在该项目上的通过率或得分率
例：32名被试在4个题目上的得分
被试
1 2 3 4 5 6 7
题1
1 1 1 1 1 1 1
题2
1 1 1 1 0 1 1
题3
1 1 1 1 1 1 1
题4
一、项目的选择
测 验 编 制 的 一 般 程 序
选择测验项目的要求： （一）测验的性质
能够测量所需要的特质的项目。
（二）项目的区分度。
通常，项目的区分度越高越好。
（三）项目的难度。
根据测验的目的而定。
第四节 合成测验
二、测题的编排
测 验 编 制 的 一 般 程 序
测验编排的一般原则： 测题的难度排列宜逐步上升 尽可能将同类型的测题安排在一起 注意各种类型测题本身的特点
第二节 测题的编写
（二）是非题的编制要领
例：测量的效度只受系统误差的影响，不受随机误差 的影响。( )
测 验 编 制 的 一 般 程 序
内容以有意义的概念、事实为基础
每道题只包含一个概念
尽量避免否定的叙述 “是”“非”题的数目应有适当比例，基本 相等，随机排列
第二节 测题的编写
（三）简答题的编制要领
项 目 分 析
l.00 0.90 O.80 O.70 0.60 0.50 0.40 0.30 0.20 0.10 0.00
第二节 项目的区分度
三、区分度与难度的关系
１.０ 区 分 度
项 目 分 析
０.５
０.０
０.０
０.５
１.０
难度
说明： 难度和区分度都是相对一定团体而言的，绝对的难 度和区分度是不存在的。 兼顾其它因素（如同质性），一个科学的测验，其 难度的分布宜广一些，梯度多一些，最好是以0.5为均 数的正态分布。
第二节 项目的区分度
项目的鉴别指数与评价
项 目 分 析
鉴别指数（Ｄ） ≥0.40 0.30～0.39 0.20～0.29 ≤0.19
项目评价 很好 良好，修改后会更佳 尚可，但需修改 差，必须淘汰
第二节 项目的区分度
（二）相关法
项 目 分 析
以某一项目分数与效标成绩或测验总分的 相关作为该项目区分度的指标。相关越高，表 明项目越具有区分的功能。
明确所要测量的目标，将其操作化 尽量选择真实性程度较高的项目
指导语要简明扼要
制定好评分标准和计分方法
第二节 测题的编写
五、编制预备测验
编制预备测验要注意以下几个问题：
测 验 编 制 的 一 般 程 序
题目的范围应与双向细目表一致
题目的数量要比最后所需的数量要多
题目的难度必须符合测验目的的要求
0
0 0 0 0 0 0 0 0
1
1 1 1 1 0 0 0 0
解 １.按总分排序 ２.确定高、低分组 分组人数=32×0.27≈9人 高分组：1～9号 低分组：24～32号 ３.分别计算高、低分组在各题的通过率 P1H=9÷9=1.00 P1L=2÷9=0.22 P2H=8÷9=0.89 P2L=2÷9=0.22 P3H=8÷9=0.89 P3L=1÷9=0.11 P4H=6÷9=0.67 P4L=0÷9=0.00 ４.分别计算各题鉴别指数 D1=1.00－0.22=0.78 D2=0.89－0.22=0.67 D3=0.89－0.11=0.78 D4=0.67－0.00=0.67
吉尔福特难度矫正公式
项 目 分 析
（因为选择题易受到猜测的影响，吉尔福特对此进行 了校正。）
KP 1 CP K 1
CP—矫正后的通过率 P—实际得到的通过率 K—备选答案的数目
第一节 项目的难度
（二）非二分记分的项目（0分～n分）
项 目 分 析
X P=——— ×100% Xmax X ：全体被试者在该题上的平均分