心理测量学第四节 测量的效度

内容效度的适用
❖ 编制任何测验都要加以考虑的基本方面 ❖ 教育和职业成就测验最适合 ❖ 对于能力倾向测验和人格测验不大适合 ❖ 内容效度与表面效度（face validity）
2006年11月
❖ 54、在编制测验时，效度是要考虑的重要特 性。如果编制最高行为测验，除了内容效度， 也要求有（ ）。 （A）较高的表面效度 （B）较好的专家判断 （C）较好的外行判断 （D）主观性
❖ Pcp=38/45=84%
2006年11月（2008年5月）
❖ 105、效标效度的主要评估方法有（ ）。
❖
（A）命中率法 （B）区分法 （C）失误法 （D）相关法
2009年5月（三级）
❖ 57、检验测验分数能否有效地划分由效标所 定义的团体的一种方法是（ ）
❖ （A）相关法 ❖ （B）区分法 － ❖ （C）命中率法 ❖ （D）失误法
测验内方法
❖ 确定测验的内部效度 ❖ 分析被试对题目的反应特点 ❖ 考查测验的同质性
测验间方法
❖ 相容效度（congrugent validity） ❖ 区分效度（discriminate validity） ❖ 因素分析法（factor analysis）
2008年5月（二级）
❖ 多选：106、可以作为构思效度证据的有 ( )．
效标测量的判断标准
❖ 有效性 ❖ 可靠性 ❖ 客观性 ❖ 实用性
实证效度的检验方法
❖ 相关法 ❖ 区分法 ❖ 命中率法
相关法
❖ 计算测验分数与效标测量的相关。根 据变量的性质不同,可分别采用不同 的积差相关,等级相关法,二列相关法 等。
区分法
❖ 看预测源分数是否能区分由效标测量 所定义的不同团体。
❖主试 ❖时间间隔 ❖测验情境 ❖被试
三、样本团体的性质
❖ 样本的异质性 ❖干涉变量（moderator variable）
性别 年龄 教育水平 智力 动机 兴趣
四．效标的性质
❖ 效标与测验分数之间的关系 是否线性相关
❖ 效标测量本身的可靠性
❖ 所谓效标效度，就是考查测验分数与效标的关系， 看测验对效标的预测程度，因此叫效标效度。
❖ 因为效标效度需要有实际证据，所以又叫实证效度。
效标效度
❖ 根据搜集效标的时间： 同时效度（concurrent validity） 预测效度（predictive validity）
❖ 阿斯丁将效标细分为两个层次： 理论描述水平的“观念效标” 操作定义水平的“效标测量”
❖ 最常采用的t检验。
命中率法
❖ 预测源与效标关系可能四种情况：
效标测 量 预测源
成功
成功 失败
A（命中） B（失误）
失败 C（失误） D（命中）
命中率法两种指标
❖ 总命中率
Pct

命中 命中 失误

A
AD BC
D

正确 总数
❖ 正命中率
pcp

成功人数 选择人数 *100%

A A B
❖ （1-K）可作为预测效率的指数，用E表示，E值 大小表明使用测验比盲目猜测能减少多少误差
影响效度的因素
❖ 测验本身的因素 ❖ 测验实施中的干扰因素 ❖ 样本团体的性质 ❖ 效标的性质
一、测验本身的因素
❖ 测验取材的代表性 ❖ 测验长度 ❖ 试题类型 ❖ 难度 ❖ 区分度 ❖ 编排方式
二、测验实施中的干扰因素
2008年5月（二级）
❖ 58、效度系数的实际意义常常以决定系数来 表示，如测验的效度是0．80，则测验可以 正确预测或解释的效标的方差可占效标总方 差的( )．
❖ (A)36％ (B)46％ ❖ (C)56％ (D)64％－
二．预测效标分数
❖ 建立测验分数预测效标成绩的回归方程
· Y a byx X
二. 构想效度（contruct validity）
❖ 构想效度就是测验对于某一理论概念 或特质测量的程度。
❖ 构想是指心理学理论所涉及的抽象的、 假设性的概念或特质。
确定构想效度的基本步骤
确定构想效度的步骤 建立理论框架 推演相关假设 验证提出的假设
确定构想效度的方法
多方面搜集证据： ❖ 测验内方法 ❖ 测验间方法 ❖ 研究测验的实证效度 ❖ 实验研究
❖ (A)测验的内容效度-
❖ (B)测验的内部一致性指标 -
❖ (C)分析几个测验间的相互关系 析被试者对题目的反应特点-
(D)分
三. 实证效度/效标效度/效标关联效度 （critreion-related）
❖ 实证效度是指一个测验对处于特定情景中的个体行 为进行预测的有效性。
❖ 也就是对于研究者感兴趣的行为预测得怎么样。被 预测的行为是衡量测验是否有效的标准，简称效标。
❖ A、稳定性 ❖ B、准确性 － ❖ C、可信度 ❖ D、区分性
效度的性质
❖效度具有相对性
❖效度具有连续性
信度与效度的关系
❖ 信度是效度的必要而非充分条件
❖ 效度是受信度制约的
第二单元 效度评估的方法
❖ 一.内容效度 ❖ 二.构想效度 ❖ 三.效标关联效度
一. 内容效度
❖ 内容效度(content-related validity)是指测验 题目对有关内容或行为总体取样的适当性程度。 因为这种效度主要是考察测验的内容,因此叫内 容效度。
❖ Y是预测的效标分数；a是纵轴的截距，byx是斜率，即Y向X回 归的系数；X为测验分数。
byx rxy • Sy / Sx
a Y byx X
❖ rxy是测验分数与效标分数的相关，即效度系数。
预测效率指数
❖ 无关系数，用K表示，K值大小表明预测源分数与 效标分数的无关程度。
K Sest / Sy 1 rx2y E 100(1 K)
内容效度确定的方法
❖ 专家判断法（逻辑效度） ❖ 经验判断法 ❖ 统计分析法
2009年5月（二级）
❖ 多选：92、为了使内容效度的确定过程更为 客观，弥补不同专家对同一测验的判断可能 的不一致，可采用的步骤是（）
❖ （A）定义好测验内容的总体范围－ ❖ （B）编制双向细目表－ ❖ （C）制定评定量表来测量测验的整体效
度－ ❖ （D）进行统计分析
2008年11月（二级）
❖ 105、除了描述性语言外，内容效度的确定 也可采用一些统计分析方法，如（ ）
❖
A、计算评分者信度－
❖
B、计算复本信度－
❖
C、专家推测
❖
D、再测法－
2009年5月（三级）
❖ 多选：119、内容效度的评估方法有（ ） ❖ （A）专家判断法－ ❖ （B）双向细目表法 ❖ （C）统计分析法－ ❖ （D）经验推测法－
*100%
例题：有100人参加测验，根据预测源，又让 100人参加实际训练，结果及格组45人中，38 人优秀，7人淘汰；失败55人中，22人优秀， 有33人淘汰。
优秀 淘汰 合计 优秀 A38 B7 45 淘汰 C22 D33 55 合计 60 40 100
❖ Pct=38+33/100=71 %
第四节 测验的效度
第一单元 效度的概念
❖ 效度（Validity）是指一个测验或量表实际 能测出所要测量的心理特质的程度。
❖ 从心理测量理论的角度，效度是与测量目标 有关的真实分数方差（有效分数方差）与总 分方差的比率。(SV2/ SX2)
2008年11月三级
❖ 60、在心理测验中，效度是指一个心理测验 的（ ）
2006年11月
❖ 多选：102、使用同一测验，在同样条件下对同一 组被试者前后施测两次测验，求两次得分间的相关 系数，叫（ ），又称（ ）。
❖
（A）复本信度 （B）重测信度 （C）稳定性系数 ❖ （D）分半信度
第三单元 效度的功能
❖预测误差 ❖预测效标分数 ❖预测效率分数
预测误差
❖ 郊度系数的实际意义常常以决定性系数来 表示，它表示测验正确预测或解释的效标 的方差占总方差的比例。
Sest Sy 1 rx2y
❖ Rxy2代表效度系数的平方，即决定系数；Sy 为效标成绩的标准差。
❖ 真正效标分数落在预测效标分数的不同水 平的Sest范围内。
Fra Baidu bibliotek
习题
❖ 21、如果某测验的效度是0.70，则在测验中 无法作出正确预测的比例是（ ）。 （A）0.30 （B）0.51 （C）0.49 （D）0.70