测验的效度(新教材)

效度受信度的制约
• 效度与信度的关系式：rxy≤√rxx
• rxy效度系数 • rxx信度系数
2018/11/27
4
二、效度的性质
（一）效度具有相对性 评价测验效度时，必须考虑其目的与功能 （二）效度具有连续性 测验效度只是程度上的不同，而没有“全” 或“无”的区别 评价一个测验，不应该说“有效”或“无 效”，而应该用效度较高或较低来评价 测验有效性是针对测验结果而言
•3、用效标效度做证明
•根据效标选择不同的被试群体，比较不同组测验成绩的差异
•利用心理素质的变化关系，如儿童年龄增长与能力发展的关系。
•4、实验法和观察法
•观察实验前和实验后测验分数的差异
2018/11/27
12

三、效标效度（criterion–related validity）
• （一）什么是效标效度？ • 效标效度又称实证效度，反映的是测验预测个体在 某种情景下行为表现的有效性程度。 • 被预测的行为是检验效度的标准，简称效标。 • 同时效度：测验所得分数与效标同时验证，与心理 特征的评估及诊断有关 • 预测效度：效标资料需要一段时间后才可收集，用 于选拔、分组的测验有关。
• 需要被试者在测验中尽最大努力的测验要求较高的表面效度 • 需要被试这尽可能按自己实际情况回答的测验要求较低的表 面效度
2018/11/27 10

二、构想效度（construct–related validity）
• （一）什么是构想效度（结构效度）？ • 指测验能够测量理论上的构想或特质的程度，亦即 测验的结果能否证实或解释某一理论的假设、术语 或构想，解释的程度如何。 • 构想效度一般要回答以下几个问题：
测验的效度
2018/11/27
1
第一单元 效度的概念

定义



效度（validity），在心理测验中是指所测量的与 所要测量的心理特点之间吻合的程度。 心理测验的准确性 心理测验的有效性（龚耀先）


在编制或修订心理测验时，效度研究是必须的环节， 效度资料是测验手册里必备的测量学指标。 在使用心理测验时，没有效度资料的测验也不能使 用。

2018/11/27 5
第二单元 效度评估的方法

一、内容效度（content–related validity）

（一）什么是内容效度
• 指测验条目对有关内容或行为取样的实用性。换句 话说，所选用的条目是否能测到想要测量的行为。

ຫໍສະໝຸດ Baidu
1、对所测量的心理特征有明确的概念 2、测验题目应是所界定的内容范围的代表性取 样
11
•2、测验间的相互比较
•与经典、成熟的同类测验相比较：计算新测验与经典测验之间分数
的相关。相关系数的平方即两测验分数共同解释的变异大小，又称 为相容效度（congruent validity）。 •区分效度（discriminate validity）：一个有效的测验不仅应 与其他测量同一构思的测验成绩有相关，还必须与测量不同构思的 测验成绩无相关，后者就是区分效度。 •因素分析方法（factor analysis）：对一组测验进行因素分析， 找出影响测验分数的共同因子，这种因素可能就是我们要测量的心 理特征。
• 测量了什么心理构想？ • 对这构想测量得有多好？ • 测验分数中有多少比例的变异来自测验所欲侧之构想？
• （二）构想效度估计方法
• 1、对测验本身的分析
• 测验的内容效度可以作为构想效度的证据 • 测验的内部一致性指标（同质性信度）指标，
2018/11/27
如分半相关、 α系数等 • 分析被试对条目的反应特点
2018/11/27 7
高中化学标准测验双向细目表
识记 第一章 第二章 第三章 第四章 合计 3 2 5 10 6 9 25 了解 应用 8 6 2 12 28 分析 2 2 4 6 14 10 7 5 22 6 6 综合 评估 合计 10 28 22 40 100
8
2018/11/27
• 2、统计分析法 • 计算两个评分者之间一致性 • 克伦巴赫推荐的方法：先编出两个测验复 本（取自同样内容范围），在同一组被试 中实测，然后计算其相关。 • 再测法：学习前先测验一次，学习后在测 试一次，计算两次相关。 • 3、经验推测法 • 通过实践来检验 • 如检验儿童发展量表的效度，观察不同年 龄阶段儿童通过率是否随年龄的增长而增 加。
2018/11/27 9
（三）内容效度的特性



1、不是普遍适用，根据具体情况分析； 2、有时间上的特定性，适合过去总体的代表性测验， 未必符合现在的总体。 3、不同类型的测验对表面效度的要求是不同的 表面效度 是由外行对测验做表面上的检查，不反映测验实际 测量的东西，只是指测验表面上看来好象是测量所 要测的东西。 考虑题目与测量目的之间明显的、直接的关系。 编制测验，表面效度是一个必须考虑的特性。
2018/11/27
3

信度和效度的关系

信度和效度的差别在于所涉及的误差不同
• 信度考虑的是随机误差的影响 • 效度则还包括测验稳定的测量误差（系统误差）

信度是效度的必要条件而非充分条件
• 一个高效度的测验，其信度必然也高； • 一个高信度的测验，其效度不一定高。 • （可信的测验未必有效，而有效的测验必定可信。 ）
2
2018/11/27
测量的效度受随机误差和系统误差的影响


测验分数的总方差（SX2） =真实方差（ST2） +误差方差（ SE2 ） 真实方差（ST2）=有关的方差（SV2有效方差） +无关但稳定方差（SI2系统误差） SX2 = SV2+ SI2+SE2 信度rxy2=有效方差SV2 /总方差SX2

要求内容效度的测验，不一定要求测验为同质的。
• 测量单一心理特质的测验要求测验条目有高度的同质性 • 测量一组不同心理特质的成套量表，不要求各分测验之间具 有同质性。
2018/11/27
6

（二）内容效度的评估方法
• 1、专家判断法
• 请有关专家对条目进行审定（逻辑效度） • 审定步骤
①定义测验总体范围，描述相关知识与技能及 所用材料的来源。 ②编制双向细目表，确定各种内容所占比例， 标出每个条目设计所测内容。（见表） ③制定一个相应的评定量表来评价效度，如测 验包括的内容、技能、材料的重要程度、条目 对内容的实用性等。请每位评定者对各方面进 行评价，然后总合所有评定者的评价。