第四章-测验信度作业

合集下载

第四章信度和效度1

第四节素质测评中效度的评估
一、内容效度二、效标关联效度三、构想效度
Hale Waihona Puke Baidu
一、内容效度
• （一）内容效度的概念 • 内容效度是检查测验内容是否是想要测量的行为领域的代表性取样的指标。 • （二）内容效度分析时需要注意的问题 • 1.应避免将测验取样的行为领域过于泛化； • 2.要避免测验分数中无关因素的影响。 • （三）内容效度的评估方法 • 主要有：专家评判法、经验法、统计分析法。 • （四）内容效度的应用 • 内容效度最适合于评估教育和职业成就测验，也适合于某些用于选拔和分类的人事测验，一般不适用于能力倾向测验和人格测验。
（三）重测信度的评估
• • • • • • • • • • • 1.在进行重测信度评估时要注意：（1）重测信度一般只反映由随机因素导致的变化，而不反映被试行为的长久变化；（2）不同行为受随机误差的影响不同。 2.重测信度的假设前提（1）每一被试对前一次测验的遗忘程度相同；（2）每一被试在重测的间隔期内没有学习与测验有关的其他材料。 3.注意：解决问题型的测验不适合采用重测的方式来考察其信度；而感觉-运动型测验或人格测验较适合采用重测的方式来考察其信度。
• 一、效度的概念及其理解 • 是指测验的结果所反映的内容与想要考察的内容的关系，二者越是吻合，效度就越高。 • 效度不仅要排除随机误差，而且还要排除系统误差。 • 二、效度的性质 • 效度指的是测量结果的效度；效度是连续性的；效度同时也是针对目标而言的；效度是用已有的证据推理而得到的。 • 三、效度与信度的关系 • 信度高，效度不一定高；效度高信度必定高。信度是效度的必要条件，但不是充分条件。

第四章测验信度作业

第四章测量信度

一、单选题

1.速度测验的信度应以( c )取得。d

A．奇偶法 B.筛选法 C.反应时法 D.重测法

2.在其他条件均等的情况下，测验长度和信度之间的关系是( d )。b

A.测验越长，信度越低

B.测验越长，信度越高

C.没有关系

D.上述说法都不正确

3.计算一项测验的分半信度最常用的方法是比较( b )。

A.测验的前半部分与后半部分的得分。

B.奇数项目与偶数项目的得分。

C.将测验随机分为两部分,比较这两部分的得分。.

D.上述方法都可以。

4.一个40道题目的测验其奇偶分半后的信度为0.50,那么该测验的信度接近多少?

( b )

A. 0.50

B. 0.67

C. 0.80

D. 1.0

5.当测验的信度减少(接近0)时,测量的标准误将会怎样变化(c )?

A.减小,趋向于零。

B.只要趋向于1.0,它就会要么增大,要么减小。

C.增大,趋向于测验的标准差。

D.增大,逼近无限大。

6.再测信度所考虑的误差来源是(d )所带来的随机影响。

A.形式的不同

B.题目的不同

C.考生的不同

D.时间的不同

7.在考查评分者信度时,如果三人以上评阅数份试卷,则需计算( a )。

A.肯德尔和谐系数

B.等级相关系数

C.皮尔逊积差相关系数

D.克伦巴赫α系数

8.(a )是指在不同时间内用同一测验(或用另一套相等的测验)重复测量同一被试者,所得结果的一致程度。

A.信度

B.效度

C.难度

D.区分度

9.信度只受(d )的影响。b

A ．系统误差 B.随机误差 C.恒定效应 D.概化理论

10.复本信度又称等值性系数。它是以两个等值但题目不同的测验(复本)来测量同一群体,然后求得被试者在两个测验上得分的相关系效。复本信度反映的是测验在( c )上的等值性。d

第4章测量的信度与效度

5、效度的类型（1）内容效度（Content Validity）也称为表面效度（Face Validity）、逻辑效度。它是指问卷的内容是否具有代表性，即是否包括被测量构成所有层面的项目。若问卷内容是以理论为基础，并参考以往学者类似研究的问卷内容加以修订，并与实践或学术专家讨论过，且进行过预测，即可以认为具有相当的内容效度。内容效度反映设计的观测变量是否代表了所要测量的内容或主题，可通过计算观测变量单项与得分总和之间相关系数来测量，相关系数越大，量表的内容效度越高。一般要求所测单项与总和之间的相关系数在0.3以上。考察内容效度旨在系统地检查测量内容的适当性，并根据我们对所研究概念的了解去鉴别测量内容是否反映了这一概念的基本内容。
1.167
1.833 4.833 2.833 4.833 4.667 2.333 27.333
0.408
0.408 0.408 0.408 0.408 0.516 0.516 1.862
0.167
0.167 0.167 0.167 0.167 0.267 0.267 1.533 3.467
可以利用Excel软件进行有关计算：第8行计算均值，第9行计算标准差，第10行计算方差。
2 2 2 Rxx T2 / X 1 ( E /X )
信度系数越大，表明测量的可信程度越大。信度的估计方法有许多，比较易于使用的是相关系数的方法。一般采用同一问卷进行两次调查，再计算其相关系数。

第四章测验的信度与效度

（3）α=0.05 时， Z0.05 1.96
（4） Z Z0.05 ，接受虚无假设
所以，被试的操作智商与言语智商无显著性差异。
39
❖ 例，某校五年级进行了两次数学测验，小张第一次考了85分，此次数学测验年级平均分是77分，标准差是8分，此次测验的信度系数是0.84；第二次考了95分，此次数学测验年级平均分是81分，标准差是10分，此次测验的信度系数是0.91；问小张这两次数学测验的成绩是否有显著差异？
r＝ xy N sxsy
9
施测时间间隔再施测相关系数图1 重测信度图式
10
重测信度的计算举例
10名学生幸福感调查的两次施测分数
ABCDE FGH I J X1 16 15 13 13 11 10 10 9 8 7 X2 15 16 14 12 10 9 11 8 6 7
2、注意事项： ❖所测量的心理特性必须是稳定的。 ❖遗忘和练习的效果基本上是相互抵消的。 ❖在两次施测的间隔时期内，被试在所要测验的心理特质方面没有获得的更多的学习和训练。 ❖易受练习和记忆的影响，两次测试的时间间隔要适当，一般是2～4周较宜，间隔时间最好不超过6个月。
3
❖ 2、测量学定义：
信度为一组测量分数的真分数方差和总方差（实得分数的方差）的比率。
信度乃是一个被试群体的真分数与实得分数的相关系数的平方。

第四章测量信度

二、信度的统计定义
信度是被试团体真分数方差与实得分数方差之rX比X ：TX22
T2
2 E
2 X
2 T
2 E
2 X
信度是被试团体真分数与实得分数相关系数的平方：
rXX XX
rXX
2 TX
理论定义
操作定义
信度是一个测验X（A卷）与它的任意一个平行测验（B卷）的相关系数。
两组测验分数之间的相关
方差相等时
rxx
2rhh 1 rhh
弗拉南根公式卢尤公式
方差不等时
（二）同质信度
同质性题目间的内部一致性
克龙巴赫系数
各类题型
类型库-理信度
0、1 题型
K-R20 难度不同
k-R21 难度相近
四、评分者信度
含义评分者评分的一致性
2评分者
rXY
rρ
方法
2个以上者肯德尔和谐系数
真分数与实得分数相关的解释信度系数和指数
测验B1
等值稳定性系数
测验A1
合适时距
测验B1
等值性系数
含义
两等值测验最短时间内对同组对象施测结果r
程序
A卷
最短时距
等值
B卷
性
误差
内容取样
评价
优点
代表性增强，信度更准避免练习、记忆效应

第四章测量信度

测验 1 2 3 13 14 4 13 12 被 5 11 11 16 15 16 16 试 6 10 9
7 10 11 9
8 8
9
10 7 7
X1
X
2
8
6
求解过程
先计算出公式所需的各统计量
X
1
112
X
2
110
2 X 2 1324
X1 X 2 1324
X
2
1
1334
1)要构造出两份或两份以上真正平行的测验;
2)计算复本信度需要对同一批被试测试两份平
行测验，这就需要掌握一个合理的时间安排。
3)应该尽量在测试结果报告中，详尽地说明两
次测试的时间间隔、测试顺序安排、测试过程中被试的有关测验经历等。
4 消除施测顺序的影响
为排除施测顺序的影响，求复本信度之前，
一、重测信度P53
1 定义
2 计算方法测验
一段时距
再测验
计算公式
r r
tt
X 1X 2

2 1
X X X X / n
1 2 1 2
(1)
X ( X ) / n X ( X ) / n
2 1 2 2 2 2
其中, X 1
X2 、
分别代表首测和再测分数
3 例子

心理测量第4章心理和教育测量的信度

团体的异质程度与分数的分布有关，一个团体越是异质，其分数的分布的范围也就越大，新度系数也就越高。
由于信度系数与样本团体的异质性有关，因此我们在使用测验时，不能认为当该测验在一个团体中有较高的信度时，在另一个团体中也具有较高的信度。因此，往往需要重新确定测量的信度。

测验的长度
一般来说，测验越长，信度值越高。这是
使用奇偶分半法一定要注意两个问题：

如遇到有牵连的项目或一组解决同一问题的项
目时，这些项目应放在同一半，否则将会高估
信度的值；

当试卷中存在任选题或试卷为速度测验时，不
宜采用分半法
同质性信度

同质性也称内部一致性，指的是测验内部所有题目间的一致性。分半法实际上就是对测验内
部一致性的一个粗略估计。
分半信度
分半法是按正常的程序实施测验，然后将
全部项目分成相等的两半，根据各人在这两半
测验的分数计算其相关系数。在计算分半信
度的时候，通常采用奇偶分半法，求出所有被
试奇偶数项目总分的相关系数。
由于这样求得的只是半个测验的信
度，因此要用斯皮尔曼-布朗公式校正，
校正公式为：
rxx
2rhh 1 rhh
SEd SE SE
2 1
2 2
SEd为差异的标准误，SE1、SE2为两个测

第四章测量信度

第一节信度概述

一、什么是信度

信度又叫可靠性，是指测量结果的稳定性程度或一致性程度。一个好的测验必须稳定可靠，即多次测量的结果保持一致，否则便不可信。例如：我们用一个智力量表去测量某一个儿童，第一次测得的结果是IQ=90，第二次测得的结果是IQ=120。那么我们就会问：到底这儿童的智商是多少？这就是该智力测验的可靠性有问题。就好象用橡皮筋去量东西的长度。前面讲过，任何一种测量，总有或多或少的误差，信度受随机误差的影响。随机误差越大，信度也就越低；随机误差越小，信度就越高。因此，信度也可看作测量结果受机遇影响的程度。

信度的含义可以从两个层面加以分析：（1）当我们以同样的测量工具重复测量某项持久性的特质时，是否得到相同的结果？由此可知此一测量工具的稳定性。（2）测量工具能否减少随机误差的影响，提供某项特质个别差异程度的真实量数？由此可知测量结果的精确性。（如新旧枪射击结果图）

在测量理论中，信度被定义为：一组测量分数的真变异数与总变异数（实得分数的变异数）的比率。即：

γXX = S T2 /S X2

式中γXX代表测量的信度，S T2代表真分数变异数，S X2代表总变异数，即实得分数的变异数。

由于X=T+E，所以信度还可表示为：

γXX=（S X2-S E2）/ S X2=1- S E2/ S X2

由于真分数的变异数是不能直接测量的，因此信度是一个理论上构想的概念，由于我们无法得到测验的真正信度，我们只能用一些指标对它进行估计。

二、信度系数

大部分的信度指标都以标志着系数表示，即用同一被试样本所得的两组资料的相关作为测量一致性的指标，称作信度系数。

第四章--测量信度

0.90的信度系数表明，在不同的招聘候选人之间进行比较，候选人测验分数的90%差别是由于个体之间真实的能力差异所导致的，而10% 差别是由于随机误差所导致。
第四页，编辑于星期日：八点十三分。
2、信度是一个被试团体的真分数与实得分数的
相关系数的平方。（理论定义）
rxx = p2tx
(rxx为信度系数)
1、当评分者人数为2时，评分者信度等于两者评分的相关系数（积差相关或等级相关）。 2、当评分者人数大于2时，评分者信度采用肯德尔和谐系数计算。 W = 12 [∑R2i –(∑Ri)2 / N] / [ K2 ( N3–N )]
其中K是评分者人数，N是被评的对象数，Ri 是第i个被评对象的被评等级之和。
第三十二页，编辑于星期日：八点十三分。
（三）被试方面的可能影响
1、动机作用 2、测验经验 3、测验焦虑 4、生理变因（身心健康、疲劳等） 5、被试团体的异质性程度
第三十三页，编辑于星期日：八点十三分。
一、重测信度
重测信度(Test-retest Reliability)指的是用同一个量表对同一组被试施测两次所得结果的一致性程度，其大小等于同一组被试在两次测验上所得分数的皮尔逊积差相关系数。
施测
时间间隔相关系数
再施测
第八页，编辑于星期日：八点十三分。
重测信度的计算公式与使用前提

心理测量学重点

心理测量学

第一章概论

一、测量：根据一定的法则使用量尺对事物的属性展开定量叙述的过程。

二、测量的精确度决定于测量对象本身的性质（确定型、随机型、模糊型）和测量工

具的精密性。三、测量的基本要素：1.参照点（1）绝对参照点（有绝对的零点，可进行

乘除运算）（2）相对参照点（以人确定的零点，只可加减）

2.单位：条件：必须存有清楚的意义和成正比的价值

四、测量的量表：称名量表、顺序量表、等距量表（可进行加减运算）、比率量表

（可进行加减乘除）

五、心理与教育测量的定义：根据心理学和教育学法则给人的心理特质和教育成就指

派数字，或者根据一定的心理学和教育学理论在测验上对人的心理特质和教育成就展开定

量叙述的过程。六、基本建设一个测验应具有以下四个基本条件：（1）犯罪行为样本。

（2）标准化：指测验的编制、实施、记分以及测量分数解释的程序的一致性。标准

化条件：测验内容、施测条件、评分规则和测验常模的标准化。（3）难度或应答率。（4）信度和效度。

七、1918年，桑代克明确提出“凡客观存在的事物都存有其数量”。1939年，麦柯

尔进一步明确提出“凡存有其数量的事物都可以测量”

作业补充题：1、为什么说心理与教育测验的分数本质上是顺序量表上的分数？答：

从本质上讲，心理与教育测量的量表属于顺序量表。

（1)从采用的参考点来说，教育测量和心理测量领域的参考点均为相对零点；（2）

从采用的单位来说，教育与心理测量的单位离没其他测量的单位明朗健全。

第二章简史

一、现代心理与教育测量的起源：（1）1879年德国心理学家冯特在莱比锡大学创建

第四章测量信度.ppt.Convertor

第四章经典测验理论的基本假设

要点提示：

掌握信度的意义，信度系数的计算，了解影响信度的主要因素以及提高信度的常用方法等内容。

第一节

信度概述

一.信度

信度：测量结果的稳定性程度。若能用同一测量工具反复测量某种物体属性，则其多次测量结果间的一致性程度。

信度：相同被试在不同时间或场合下重复用同一测量工具或等价测量工具所获得结果的一致性程度。

三种等价的信度定义：

信度乃是一个被测团体真分数的变异数与实得分数的变异数之比。

信度是一个被测团体真分数与实得分数的相关系数(信度指数)的平方。

信度乃是一个测验X与它的任意一个平行测验X＇的相关系数。

A卷：你是一个喜欢热闹的人吗？

1=绝对是

2=是

3=不一定

4=不是

5=绝对不是

B卷：你是一个喜欢安静的人吗？

1=绝对是

2=是

3=不一定

4=不是

5=绝对不是

信度指数的推导

x,t,e分别为观测分数、真分数、测量误差的离均差。

二.信度的作用

随机误差大小的反映

解释个人测验分数的意义

不同测验分数的比较

测量的标准误

是测量所产生误差的标准差。

需要注意的几点问题

一个测验可以有多个信度值

不同水平的人会有不同的测量误差

测量结果是不能僵硬地看成一个点

第二节

信度的估计方法

有多种因素

一.重测信度

重测信度（Test-Retest Reliability）

用同一量表对同一组被试施测两次所得结果的一致性程度，其大小等于同一组被试在两次测验上所得分数的皮尔逊积差相关。

所测心理特质必须是稳定的。

遗忘和练习的效果相互抵消

施测的间隔期内，被试的心理特质没有获得更多的学习和训练

报告重测信度时，要说明两次施测间隔及被试的经历

第四章测量的信度与效度ppt课件

心理特质方面没有其他的学习和练习
严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。
➢ 3.计算重测信度应注意的问题 ➢ （1）两次测验时间间隔要适当 ➢ （2）应提高被试的积极性 ➢ （3）适宜于人格测验与速度测验，不适合于智
严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。
➢ 三、信度的作用 ➢ （一）评价测验 ➢ 信度是测量过程中所存在的随机误差大小的反映。信度低，
测量随机误差大，测量结果就会与真分数发生较大偏离。 ➢ 信度是衡量一个测验好坏的重要指标之一，测验的信度达
➢ 例题：某态度量表共７道题目，100个被试在各题上得分的方差分别是0.81, 0.82, 0.80, 0.86, 0.88, 0.79, 0.89,测验总分的方差是26.00,计算该测量的信度。
严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。
➢ 计算方法与复本信度类似，但被试在两半测验上得分的相关系数只是半个测验的信度，所以必须用斯皮尔曼—布朗公式加以校正：
严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。

心理与教育测量戴版课后习题及解答

第一章心理与教育测量概论练习与思考练习与思考：

1.与物理测量相比较，阐明心理测量的特点。

解答要点：

答：（1）从依据的法则来说，心理与教育测量依据的法则在很大程度上只是一种理论。（2）从测量的内容来说，心理与教育测量的内容是复杂的，内隐的，其测量只能是间接的。

（3）相对与物理测量的定量分析的精确度而言，心理与教育测量定量分析的精确度很低。

2.标准化的含义及提高标准化的方法。

答：测验的标准化就是指测验的编制、实施、记分以及测量分数的解释的程序的一致性。提高标准化测验需要注意标准化测验所具备的条件：

①测验的内容标准化。②施测条件的标准化。③评分规则的标准化。④测验常模的标准化。 3.什么是最轻烙印标签，说明它在心理解释中的意义。

答：在报告可能存在心理障碍或状况，报告消极结果尽可能避免或少用任何带个人歧视的语句给被试造成伤害，应当尽量用建设性的术语报告结果。意义在于保护被测者的个人隐私，尊重他们的人格，不对他们造成伤害，这是施测者应该遵守的职业道德准则。

第二章心理与教育测量的产生与发展＞＞练习与思考

1.简述古代中国对心理与教育测量的特点。

答：在古代中国，在测验实践和测验理论方面都对心理与教育测量作出了贡献并具有自己的特点。第一、中国古代社会的心理与教育测量思想都是描述性的，而非定量的；第二、中国古代社会的心理与教育测量是分类式的；第三、注重对人作整体的鉴定和评价，并倾向于和人的道德品质联系起来。第四、是与教育中的因材施教及人才使用有着密切的联系, 它从一开始就具有强烈的应用性质。

2.简述当代心理与教育测量的特点。

第四章测量信度

答案
解：根据题目所给条件，采用KR20公式计算同质性信度。
p q 1 0 1 0 1 0 0.9 0.1 0.8 0.2 0.7 0.3 0.5 0.5 0.5 0.5 0.4 0.6 0.2 0.8 1.36
i i
r
xx
k pq [1 ] k 1 s
i 2 i x
10 9 (1 1.36 3) 0.61
2、克龙巴赫α系数（可用于多重记分的测验） α= [ k / ( k-1) ] [ 1- (∑s2i ) / s2x ] 其中k是题目数， s2i表示所有被试在第i题上得分的方差， s2x是被试测验总分的方差。

二、用统计术语谈信度
1、信度系数可定义为一个被测团体的真分数方差与观测分数方差之比。或者说，真分数变异能够解释观测分数变异的比例。 2 2 rxx = s T / s x (rxx为信度系数)
真分数方差
观测分数方差
2、信度系数等于一个被测团体的真分数与观测分数的相关系数的平方。 rxx = r2TX (rxx为信度系数) 3、信度系数等于一个测验X与它的任意一个平行测验X´的相关系数。 rxx = rxx´ (rxx为信度系数)
第三节影响信度的因素与提高方法一、影响测量信度的主要因素
（一）测量工具的可能影响

第四章心理与教育测量的信度

（四）测量工具因素试题取样不当（或题目太少或考察不全面），信度必然会低。同质性题目数量增多，信度会提高。
krxx rkk = 1+ k-1 rxx 试题之间彼此异质，内部一致性系数降低。题目太难或太
容易，会降低信度。
斯皮尔曼-布朗公式：
斯皮尔曼-布朗公式练习
例9：测验有20道测题，其信度仅为0.55，若把测题增加
分半信度指的是将一个测验分成对等的两半后，所有被试
在这两半上所得分数的一致性程度。
1、类似计算等值复本信度，但需斯皮尔曼-布朗公式校正：
rXX=2rhh/(1+rhh)
2、弗朗那根公式：rXX =2[1-(Sa2+Sb2)/SX2]
3、卢仑公式：rXX=1-Sd2/SX2
分半信度的使用条件
1、在只能施测一次或者没有复本的情况下使用。
W 0.95
信度种类小结
表4-1 测试次数和测试卷分数与信度估计方法测试卷份数测试次数 1份 2份
分半信度
库德-理查森信度 1次 2次 Alpha系数重测信度复本信度（同时测试）复本信度（延时测试）
信度种类小结
表4-2 各种信度估计方法的误差方差来源信度估计方法重测信度误差方差来源时间间隔
重测信度的使用条件
1、所测量的心理特质必须是稳定的
2、遗忘和练习的效果基本上相互抵消

第四章-测验信度作业

第四章 信度和效度1

第四章 测验信度作业

第4章 测量的信度与效度

第四章 测验的信度与效度

第四章 测量信度

第四章 测量信度

心理测量 第4章 心理和教育测量的信度

第四章 测量信度

第四章--测量信度

心理测量学重点

第四章测量信度.ppt.Convertor

第四章测量的信度与效度ppt课件

心理与教育测量戴版课后习题及解答

第四章 测量信度

第四章 心理与教育测量的信度

第四章信度和效度1

第四章测验信度作业

第4章测量的信度与效度

第四章测验的信度与效度

第四章测量信度

第四章测量信度

心理测量第4章心理和教育测量的信度

第四章测量信度

第四章测量信度

第四章心理与教育测量的信度