第五章 测量效度_PPT幻灯片
合集下载
相关主题
- 1、下载文档前请自行甄别文档内容的完整性，平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益，请联系客服反馈,我们会尽快为您处理(人工客服工作时间：9:00-18:30)。
致； 不同专家对内容范围会有不同的理解
克伦巴赫法
克伦巴赫认为，内容效度可由一组被试 在取自同样内容范围的两个测验复本上 得分的相关来作数量上的估计。当相关 高时，可以推论测验具有较高的内容效 度。
缺点：如果相关低，至少一个测验缺乏 内容效度，但不能确定哪个测验缺乏内 容效度。
如果相关高，也可能两个测验存在相同 的偏差，两者效度都不高。
最高行为测验要求有较高的表面效度，典型
行为测验却要求较低的表面效度。
（二）估计方法 1.专家判断法 2.统计法
复本法 （克龙巴赫法） 再测法 内容效度比
专家评定法
这是一种定性分析的方法，由专家对测验项目 与所涉及的内容范围进行符合性判断。
我们以教育测验为例来说明应遵循的程序。
1.确定所要测量的全部内容范围。比如要考察某一学 科测验是否有效度，就要根据教材和教学大纲列出这 门课程的全部知识点。
验的效度的考察。
内容效度对各种用于人员选拔和安置的职
业测验也是适用的。职业测验关心的是被试是
否具有从事某项职业的知识、技能等，那么要
明确某项职业所需的全部知识和技能，再对这
些知识和技能进行取样，取出一个有代表性的
样本。
内容效度不适合用于能力倾向测验和人格
测验。
缺点：缺乏理想的数量指标，因而妨碍了信息 交流和各测验的相互比较。
2.根据教育目标的要求，将测验目的具体化为不同层 次的测验目标。教育测验目标一般采用布鲁姆教育目 标分类学中的分类标准，将测验目标分成识记、理解、 应用、分析、综合、评价六个层次。按不同层次的测 验目标对知识点进行分类。
3.确定每一层次目标在整个测验项目中所占的
比重。
4.编制测验双向细目表。
一、内容效度
（一）含义
内容效度是指一个测验实际测到的内容与所要测
量的内容之间的吻合程度。
一个测验要有内容效度必须具备两个条件： 1.要有定义得完好的内容范围
20以内的加减法 中小学生的心理健康的特点和表现。 2.测验项目应是已界定的内容范围的代表性样本
如果把所有的内容视为一个总体，那么测验项目可 以视为一个样本，这个样本要具有代表性，这个样 本能够代表总体的程度就是内容效度。
2 2
四、效度验证与效度概化
效度验证：收集大量资料和证据来检验 效度的工作过程。
效度概化：是指在某一种情境中所做的 效度研究能否推广到其他情景。
效度概化方法-----交叉效度评定、元分析
第二节 效度的估计
1974年美国心理学会在《教育心理测验值标准》中将效 度分为三大类：
1．内容效度（Content Validity）
第一节 效度的概述
一、效度所要回答的问题 二、效度的含义 三、效度和信度的关系 四、效度验证与效度概化
一、效度所要回答的问题 （1）一个测验测量了什么特性？ （2）它对所要测量的特性测得有多准？
二、效度的含义
效度是指测量的有效性，一个测验实际所能 测出其所要测量的心理特质的程度。
SX2
ST2
SX2
rx↑y rxx↑ rx↓y rxx↑ rxy↓ rx↓x
2.效度受信度的制约，信度系数规定了效度 系数的上限。
根据信度和效度的定义（ rxx 可以得到，
S 2T S2X
r
2
xy＝
Sv Sx
2 2
ST2 SI2 Sx2
rxxSSxI22
rxy rxx
） r
2
xy ＝
S S
v x
CVR ni N 2 N 2
式中CVR表示内容效度比，ni表示专家中认为 某项目具有代表性的人数，N表示参加评定的 专家的总人数。
根据内容效度比，删除内容效度比低的项目。 计算全部项目的内容效度比的平均数，作为内 容效度的指标。
（三）应用和评价
内容效度适合于测验所要测量的内容总体
能够明确界定的情况。因此尤其适合对成就测
5.请专家对双向细目表以及测题是否符合双向 细目表的内容要求、测题的形式是否合适等进 行评定。
6.对测题进行必要的修改，直至多数专家对测 验的内容效度感到满意为止。最后，报告专家 评定的情况，这个评定结果可以作为内容效度。
局限
无良好的数量指标描述这种符合性的程度； 不同专家对同一测验内容效度的判断可能不一
内容效度与表面效度的区别
1）表面效度是由外行对测验做表面上的检查确定 的，而内容效度是由够资格的判断者（专家）详尽 地、系统地对测验评价而建立的。
例如，MMPI中有这样的题目：“我的喉
咙里总好象有一块东西堵着似的。”
2）表面效度不是效度的客观指标，但能对受测者 的动机产生影响，因而也会影响到效度。
效度
与测验目的有关的 有效SV2和实得SX2
的比值
r 2 xy ＝
Sv2 S x2
三、信度与效度的关系 1.信度是效度的必要而非充分条件
Sx2
SV2
SI2
SE2
ST2
下面哪种情况不可能存在？ l 高信度，高效度 l 高信度，低效度 l 低信度，高效度 l 低信度，低效度
百度文库
ST2 SX2
ST2
内容效度指测验实际测到的内容与所要测量的内容之间的
吻合程度。
2．实证效度(Criterion related Validity)
实证效度是指一个测验对处于特定情景中的个体的行为进
行估计的有效性
3．结构效度(Construct Validity)
结构效度是指测验对于被称作构想的某一理论概念或特质
测量的程度。
二、实证效度（效标关联效度）
（一）效标关联效度的含义、种类及作用
定义：是指一个测验对处于特定情景中的个 体的行为进行估计的有效性。以实践的效果 作为检验标准
被估计的行为是检验测验效度的标准，简称 效标。
根据效标资料搜集的时间差异，实证效度 可以分成同时效度和预测效度两种。有人把 二种效度都称为预测效度，并把测验称作预 测源。
再测法
在教学或训练之前施测某一测验，经过 一段时间的学习或训练后再次施测，如 果后测的成绩显著高于前测，则可以认 为测验能很好地反应学习或训练的效果， 测验具有较高的内容效度。
前测
后测
被试经过预测知识的教学
内容效度比
让本专业的专家对取样的代表性进行分析，评 价某一测验项目是否具有代表性，统计出专家 中认为某一项目能代表所要测量的内容范围的 人数，再用公式计算出内容效度之比
（二）效标
克伦巴赫法
克伦巴赫认为，内容效度可由一组被试 在取自同样内容范围的两个测验复本上 得分的相关来作数量上的估计。当相关 高时，可以推论测验具有较高的内容效 度。
缺点：如果相关低，至少一个测验缺乏 内容效度，但不能确定哪个测验缺乏内 容效度。
如果相关高，也可能两个测验存在相同 的偏差，两者效度都不高。
最高行为测验要求有较高的表面效度，典型
行为测验却要求较低的表面效度。
（二）估计方法 1.专家判断法 2.统计法
复本法 （克龙巴赫法） 再测法 内容效度比
专家评定法
这是一种定性分析的方法，由专家对测验项目 与所涉及的内容范围进行符合性判断。
我们以教育测验为例来说明应遵循的程序。
1.确定所要测量的全部内容范围。比如要考察某一学 科测验是否有效度，就要根据教材和教学大纲列出这 门课程的全部知识点。
验的效度的考察。
内容效度对各种用于人员选拔和安置的职
业测验也是适用的。职业测验关心的是被试是
否具有从事某项职业的知识、技能等，那么要
明确某项职业所需的全部知识和技能，再对这
些知识和技能进行取样，取出一个有代表性的
样本。
内容效度不适合用于能力倾向测验和人格
测验。
缺点：缺乏理想的数量指标，因而妨碍了信息 交流和各测验的相互比较。
2.根据教育目标的要求，将测验目的具体化为不同层 次的测验目标。教育测验目标一般采用布鲁姆教育目 标分类学中的分类标准，将测验目标分成识记、理解、 应用、分析、综合、评价六个层次。按不同层次的测 验目标对知识点进行分类。
3.确定每一层次目标在整个测验项目中所占的
比重。
4.编制测验双向细目表。
一、内容效度
（一）含义
内容效度是指一个测验实际测到的内容与所要测
量的内容之间的吻合程度。
一个测验要有内容效度必须具备两个条件： 1.要有定义得完好的内容范围
20以内的加减法 中小学生的心理健康的特点和表现。 2.测验项目应是已界定的内容范围的代表性样本
如果把所有的内容视为一个总体，那么测验项目可 以视为一个样本，这个样本要具有代表性，这个样 本能够代表总体的程度就是内容效度。
2 2
四、效度验证与效度概化
效度验证：收集大量资料和证据来检验 效度的工作过程。
效度概化：是指在某一种情境中所做的 效度研究能否推广到其他情景。
效度概化方法-----交叉效度评定、元分析
第二节 效度的估计
1974年美国心理学会在《教育心理测验值标准》中将效 度分为三大类：
1．内容效度（Content Validity）
第一节 效度的概述
一、效度所要回答的问题 二、效度的含义 三、效度和信度的关系 四、效度验证与效度概化
一、效度所要回答的问题 （1）一个测验测量了什么特性？ （2）它对所要测量的特性测得有多准？
二、效度的含义
效度是指测量的有效性，一个测验实际所能 测出其所要测量的心理特质的程度。
SX2
ST2
SX2
rx↑y rxx↑ rx↓y rxx↑ rxy↓ rx↓x
2.效度受信度的制约，信度系数规定了效度 系数的上限。
根据信度和效度的定义（ rxx 可以得到，
S 2T S2X
r
2
xy＝
Sv Sx
2 2
ST2 SI2 Sx2
rxxSSxI22
rxy rxx
） r
2
xy ＝
S S
v x
CVR ni N 2 N 2
式中CVR表示内容效度比，ni表示专家中认为 某项目具有代表性的人数，N表示参加评定的 专家的总人数。
根据内容效度比，删除内容效度比低的项目。 计算全部项目的内容效度比的平均数，作为内 容效度的指标。
（三）应用和评价
内容效度适合于测验所要测量的内容总体
能够明确界定的情况。因此尤其适合对成就测
5.请专家对双向细目表以及测题是否符合双向 细目表的内容要求、测题的形式是否合适等进 行评定。
6.对测题进行必要的修改，直至多数专家对测 验的内容效度感到满意为止。最后，报告专家 评定的情况，这个评定结果可以作为内容效度。
局限
无良好的数量指标描述这种符合性的程度； 不同专家对同一测验内容效度的判断可能不一
内容效度与表面效度的区别
1）表面效度是由外行对测验做表面上的检查确定 的，而内容效度是由够资格的判断者（专家）详尽 地、系统地对测验评价而建立的。
例如，MMPI中有这样的题目：“我的喉
咙里总好象有一块东西堵着似的。”
2）表面效度不是效度的客观指标，但能对受测者 的动机产生影响，因而也会影响到效度。
效度
与测验目的有关的 有效SV2和实得SX2
的比值
r 2 xy ＝
Sv2 S x2
三、信度与效度的关系 1.信度是效度的必要而非充分条件
Sx2
SV2
SI2
SE2
ST2
下面哪种情况不可能存在？ l 高信度，高效度 l 高信度，低效度 l 低信度，高效度 l 低信度，低效度
百度文库
ST2 SX2
ST2
内容效度指测验实际测到的内容与所要测量的内容之间的
吻合程度。
2．实证效度(Criterion related Validity)
实证效度是指一个测验对处于特定情景中的个体的行为进
行估计的有效性
3．结构效度(Construct Validity)
结构效度是指测验对于被称作构想的某一理论概念或特质
测量的程度。
二、实证效度（效标关联效度）
（一）效标关联效度的含义、种类及作用
定义：是指一个测验对处于特定情景中的个 体的行为进行估计的有效性。以实践的效果 作为检验标准
被估计的行为是检验测验效度的标准，简称 效标。
根据效标资料搜集的时间差异，实证效度 可以分成同时效度和预测效度两种。有人把 二种效度都称为预测效度，并把测验称作预 测源。
再测法
在教学或训练之前施测某一测验，经过 一段时间的学习或训练后再次施测，如 果后测的成绩显著高于前测，则可以认 为测验能很好地反应学习或训练的效果， 测验具有较高的内容效度。
前测
后测
被试经过预测知识的教学
内容效度比
让本专业的专家对取样的代表性进行分析，评 价某一测验项目是否具有代表性，统计出专家 中认为某一项目能代表所要测量的内容范围的 人数，再用公式计算出内容效度之比
（二）效标