第七章人员测评的信度与效度汇总
相关主题
- 1、下载文档前请自行甄别文档内容的完整性，平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益，请联系客服反馈,我们会尽快为您处理(人工客服工作时间：9:00-18:30)。
在人员测评中，对信度系数进行确定通常有 以下两方面的作用：
1．解释真实分数与实得分数的相关性
总的方差（即标准差的平方的缩略语）中 有多少比例是由真实分数的方差决定的。
2．说明可以接受的信度水准
一般的能力与成就测评的信度系数在0．90 以上；人格、兴趣等测评的信度系数通常在 0．80－0.85之间。 rxx＜0．70时，不能用测评 对个人作评价，也不能在团体间作比较； 当rxx＞0．70时，可用于团体间比较；rxx＞0．85 时，可用于鉴别个人情况。
224 1 42 63 6
0.80
12
6.1.5 影响信度的因素 1．样本团体的性质 1)样本团体的分数分布
分数分布越广，信度系数就相对越高，分 数分布越窄，信度系数就会越低。
1
S
K 2 N 3 N
N
2
N i1Fra Baidu bibliotek
Ri 2
Ri
i1
N
1 K2 N3 N
12
12
其中，K为评分者人数，N为被评定的人数 或答卷数；Ri为评分者给某人（或某一答卷） 评分之和。
S
N i1
Ri 2
1 N
N i1
2
Ri
为每一个对象被评等级。
例如，有4名评分者，对6份答卷进行评分，所 评等级如下：
如果需要在一个测评中测评不同的内容， 就应该将测评设计为几个分测评，每个分测评 测评一种内容。例如，16PF人格测评就是包含 16个分量表的测评，每个分量表只对一种人格 特质进行测评。
常用的同质性信度计算方法是库德—理查 逊估计方法。计算公式有库德—理查逊20号公 式（简称（KR20）和21号公式（KR21）。
第七章 人员测评的信度与效度
6.1人员测评的可靠性——信度 6.1.1信度的定义
信度主要是指测评结果的可靠性或一致性。
由测评工具否精确引起的误差叫系统误差。
由操作是否到位引起的误差叫随机误差。
信度考虑两方面的问题。
一是稳定性：不同时间、不同测评条件下所 得分数之间的一致性有多大；一个人的所得分 数与“真实分数”之间接近程度有多大；是否 可以达到实际应用的程度等。
下面是KR20公式：
rKR 20
n
n
1
1
n
Pi qi
i 1
Sx2
其中n为测评题目数，pi 为通过i 题的人数比例；
qi为未通过该题的人数比例；pi qi =1; n Piqi i1
为所有题目答对与答错人数百分比乘积的总和。
6.1.4 评分者信度
在有些测评中，评分者的评判也是误差的 来源之一。
ST SX
它是
真实分数标准差与实得分数标准差的比率。
其中，rxr 有时也称为信度指数，它是真实分数 标准差与实得分数标准差的比率。
方差：即每个被测评者得分与其算术平均
数差的平方和与总个数之商。公式：
Sx2
2
xx N
标准差公式： Sx
2
xx N
还可通过分析个人分数再测时的变化（误 差）来考察信度。两次测评分数的差异越大， 信度就越低。
rxx
1
Sd 2 Sx2
其中Sd2为两测评分数之差的方差；Sx2为 测评总分的方差。
也可以采用弗拉纳根公式直接计算分半信
度：
rxx
21
Sa2 Sb2 Sx2
Sa2与Sb2为两个分测评分数的方差；Sx2为总分方差。
2）同质性信度
同质性是指所有测评题目测评的只是单一 特质或内容，表现为所有测评题目得分的一致 性。乐观情绪特质和外向特质、预测和决策、 监督与控制等都是不太容易区分的。
分半法中的斯皮尔曼一布朗修正公式为：
rxx
2rhh 1 rhh
其中，rhh为两半测评的相关系数，rxx为估 计或修正后的信度。
当两半测评的方差不同时，应采用卢伦公 式或弗拉纳根公式进行修正。
卢伦公式只要求将被试在两半测评的分数 之差的方差（Sd2）和测评总分的方差(Sx2)代入 如下公式即可直接计算分半信度：
评分者信度是指不同评分者对同样对象进 行评定时的一致性。最简单的估计方法就是随 机抽取若干份答卷，由两个独立的评分者打分， 再求每份答卷两个评判分数的相关系数。这种 相关系数的计算可以用积差相关方法。
如果评分者在三人以上，而且又采用等级记 分时，就需要用肯德尔和谐系数来求评分者信 度。其公式为：
W
6.1.3 如何评估人员测评的信度
1.重测信度又称为稳定性系数
用同一测评，在不同时间对同一群体施测
两次，这两次测评分数的相关系数即为重测系 数。一个测评的重测信度越高，说明测评的结 果越一致、越可靠。积差相关公式：
r
N xy x • y
N • x2 x2 • N • y2 y2
N为两次测评结果数据配对总数；x被分析的测评结果；
y为重复测评得到的结果。在进行重测信度的评估 时，还应注意以下两个重要问题：
1）重测信度一般只反映由随机因素导致的变化， 而不反映被试行为的长久变化。
2）不同行为受随机误差的影响不同。
2.复本信度又称等值性系数。
它是以两个测评复本（功能等值但题目内 容不同）来测评同一群体，然后求得应试者在 这两个测评上得分的相关系数（积差相关）。 复本信度的高低反映了这两个测评复本在内容 上的等值性程度。两个等值的测评互为复本。
3．内部一致性信度
内部一致性信度主要反映的是测评内部题 目之间的关系，考察测评的各个题目是否测评 了相同的内容或特质。
1）分半信度
分半信度系数是通过将测评分成两半，计 算这两半测评之间的相关性而获得的信度系数。
分半法经常会低估信度，必须进行修正。斯皮 尔曼一布朗公式可以估计增长或缩短一个测评 对其信度系数的影响，用这个公式进行修正的 前提条件为：两半测评的方差相等。
二是影响稳定性的原因：什么因素造成了这 种差异；这些影响的相对作用有多大。
6.1.2 信度的作用
信度高低的指标通常以相关系数表示，称 为信度系数。信度系数一般是同一样本所得的 两组资料的相关，在理论上表示为实得分数与 真实分数相关的平方。信度系数公式：
rxx
rxr 2
ST 2 SX 2
其中：
rxr
答卷编号
评分者 一 二 三 四 五 六
甲
4
3
1
2
5
6
乙
5
3
2
1
4
6
丙
4
1
2
3
5
6
丁
6
4
1
2
3
5
Ri
19 11
6
8 17 23
Ri 19 11 6 8 17 23 84 Ri 2 192 112 62 82 172 232 1400
S 1400 842 / 6 224
W
1．解释真实分数与实得分数的相关性
总的方差（即标准差的平方的缩略语）中 有多少比例是由真实分数的方差决定的。
2．说明可以接受的信度水准
一般的能力与成就测评的信度系数在0．90 以上；人格、兴趣等测评的信度系数通常在 0．80－0.85之间。 rxx＜0．70时，不能用测评 对个人作评价，也不能在团体间作比较； 当rxx＞0．70时，可用于团体间比较；rxx＞0．85 时，可用于鉴别个人情况。
224 1 42 63 6
0.80
12
6.1.5 影响信度的因素 1．样本团体的性质 1)样本团体的分数分布
分数分布越广，信度系数就相对越高，分 数分布越窄，信度系数就会越低。
1
S
K 2 N 3 N
N
2
N i1Fra Baidu bibliotek
Ri 2
Ri
i1
N
1 K2 N3 N
12
12
其中，K为评分者人数，N为被评定的人数 或答卷数；Ri为评分者给某人（或某一答卷） 评分之和。
S
N i1
Ri 2
1 N
N i1
2
Ri
为每一个对象被评等级。
例如，有4名评分者，对6份答卷进行评分，所 评等级如下：
如果需要在一个测评中测评不同的内容， 就应该将测评设计为几个分测评，每个分测评 测评一种内容。例如，16PF人格测评就是包含 16个分量表的测评，每个分量表只对一种人格 特质进行测评。
常用的同质性信度计算方法是库德—理查 逊估计方法。计算公式有库德—理查逊20号公 式（简称（KR20）和21号公式（KR21）。
第七章 人员测评的信度与效度
6.1人员测评的可靠性——信度 6.1.1信度的定义
信度主要是指测评结果的可靠性或一致性。
由测评工具否精确引起的误差叫系统误差。
由操作是否到位引起的误差叫随机误差。
信度考虑两方面的问题。
一是稳定性：不同时间、不同测评条件下所 得分数之间的一致性有多大；一个人的所得分 数与“真实分数”之间接近程度有多大；是否 可以达到实际应用的程度等。
下面是KR20公式：
rKR 20
n
n
1
1
n
Pi qi
i 1
Sx2
其中n为测评题目数，pi 为通过i 题的人数比例；
qi为未通过该题的人数比例；pi qi =1; n Piqi i1
为所有题目答对与答错人数百分比乘积的总和。
6.1.4 评分者信度
在有些测评中，评分者的评判也是误差的 来源之一。
ST SX
它是
真实分数标准差与实得分数标准差的比率。
其中，rxr 有时也称为信度指数，它是真实分数 标准差与实得分数标准差的比率。
方差：即每个被测评者得分与其算术平均
数差的平方和与总个数之商。公式：
Sx2
2
xx N
标准差公式： Sx
2
xx N
还可通过分析个人分数再测时的变化（误 差）来考察信度。两次测评分数的差异越大， 信度就越低。
rxx
1
Sd 2 Sx2
其中Sd2为两测评分数之差的方差；Sx2为 测评总分的方差。
也可以采用弗拉纳根公式直接计算分半信
度：
rxx
21
Sa2 Sb2 Sx2
Sa2与Sb2为两个分测评分数的方差；Sx2为总分方差。
2）同质性信度
同质性是指所有测评题目测评的只是单一 特质或内容，表现为所有测评题目得分的一致 性。乐观情绪特质和外向特质、预测和决策、 监督与控制等都是不太容易区分的。
分半法中的斯皮尔曼一布朗修正公式为：
rxx
2rhh 1 rhh
其中，rhh为两半测评的相关系数，rxx为估 计或修正后的信度。
当两半测评的方差不同时，应采用卢伦公 式或弗拉纳根公式进行修正。
卢伦公式只要求将被试在两半测评的分数 之差的方差（Sd2）和测评总分的方差(Sx2)代入 如下公式即可直接计算分半信度：
评分者信度是指不同评分者对同样对象进 行评定时的一致性。最简单的估计方法就是随 机抽取若干份答卷，由两个独立的评分者打分， 再求每份答卷两个评判分数的相关系数。这种 相关系数的计算可以用积差相关方法。
如果评分者在三人以上，而且又采用等级记 分时，就需要用肯德尔和谐系数来求评分者信 度。其公式为：
W
6.1.3 如何评估人员测评的信度
1.重测信度又称为稳定性系数
用同一测评，在不同时间对同一群体施测
两次，这两次测评分数的相关系数即为重测系 数。一个测评的重测信度越高，说明测评的结 果越一致、越可靠。积差相关公式：
r
N xy x • y
N • x2 x2 • N • y2 y2
N为两次测评结果数据配对总数；x被分析的测评结果；
y为重复测评得到的结果。在进行重测信度的评估 时，还应注意以下两个重要问题：
1）重测信度一般只反映由随机因素导致的变化， 而不反映被试行为的长久变化。
2）不同行为受随机误差的影响不同。
2.复本信度又称等值性系数。
它是以两个测评复本（功能等值但题目内 容不同）来测评同一群体，然后求得应试者在 这两个测评上得分的相关系数（积差相关）。 复本信度的高低反映了这两个测评复本在内容 上的等值性程度。两个等值的测评互为复本。
3．内部一致性信度
内部一致性信度主要反映的是测评内部题 目之间的关系，考察测评的各个题目是否测评 了相同的内容或特质。
1）分半信度
分半信度系数是通过将测评分成两半，计 算这两半测评之间的相关性而获得的信度系数。
分半法经常会低估信度，必须进行修正。斯皮 尔曼一布朗公式可以估计增长或缩短一个测评 对其信度系数的影响，用这个公式进行修正的 前提条件为：两半测评的方差相等。
二是影响稳定性的原因：什么因素造成了这 种差异；这些影响的相对作用有多大。
6.1.2 信度的作用
信度高低的指标通常以相关系数表示，称 为信度系数。信度系数一般是同一样本所得的 两组资料的相关，在理论上表示为实得分数与 真实分数相关的平方。信度系数公式：
rxx
rxr 2
ST 2 SX 2
其中：
rxr
答卷编号
评分者 一 二 三 四 五 六
甲
4
3
1
2
5
6
乙
5
3
2
1
4
6
丙
4
1
2
3
5
6
丁
6
4
1
2
3
5
Ri
19 11
6
8 17 23
Ri 19 11 6 8 17 23 84 Ri 2 192 112 62 82 172 232 1400
S 1400 842 / 6 224
W