教育测量与评价的效度

三、内容效度其分析方法

1.内容效度的含义 测验题目样本对于应策内容与行为领域的代表性程度

2.应用范围 内容效度主要适用于教育测量的情境 内容效度也适合于某些用于选拔和分类的职业测验 对于某些特质的心理测验，内容效度并不合适
3.内容效度的分析方法 通常使用逻辑分析法，即依靠有关专家对测验题目与应测 内容范围的吻合程度做出判断
效标关联效度的估计方法


相关法 就是计算测验分数与效标测量的相关系数，具体方法 如下：积差相关、等级相关、点双列相关、二列相关、 四分相关、φ相关、列联相关等等。 差异显著法 该方法是根据效标测量将被试分为两个极端组（如： 好与坏，成功与失败）然后检验这两组测验分数是否 具有统计学上的差异显著性。若这两组被试的测验分 数差异显著，则说明该测验有较高的效度

表面效度

指的是在被试或非专业人士看来，测验表面上 是否在有效地测量着应测特质量的程度。
由于表面效度指的是测验用它的外部形式强烈 地提示着它正在预测什么，所以学业成就测验 和智力测验属于最佳行为测验，人格测验和态 度测量侧不适用

四、结构效度及其验证方法
1.结构效度的含义 是指心理学或社会学上的一种理论构想或特质 它本身观察不到并也无法直接测量到，但学术 理论假设它是存在的，以便能够来解释或预测 个人的或团体的行为表现
教育测量与评价的效度
学前1003班
一、效度的意义
效度就是一次测量的有效程度。严格的说， 效度是指一个测验或量表实际能测出其所 要测量的特性的程度
任何测量都存在效度问题，相对于物理测 量，教育测量和心理测量中效度问题尤为 重要
理解效度的概念，应注意事项




1、测量的效度是针对某种特殊用途而言的，不具有普遍 性。同一测验针对不同目的，其效度是不同的。 2、效度只有程度上的差异，由于教育与心理测量的间接 性，使得其测量的过程不可能百分之百的准确。但效度是 针对一定测量目的的，所以不会有绝对的有效或无效。即 总会有一定效度，不会效度为零。 3、效度是针对测量结果而言的，只有当结果真实，正确 反映了要测量的特性，才能认为这种测量的效度较高。 4、评测一个测量是否有效要多角度、多方面地收集证据， 由于预测目标的隐蔽和抽象，无法直接与测量结果进行比 较，所以要搜集证据验证实际测量了什么，这种工作过程 叫做效度验证。
结果效度的概念与分析思想
结果效度的分析围绕以下几点： 1、测验指导手册中对测验目标和测验效度的说明是否合 理 2、基于测验结果，再给被试写出测验报告或推荐书时， 有关推论是否恰如其分 3、对测验的优点和缺点是否在应用中过于夸大其实 4、是否把测验用到所测特性的范围之外 5、基于测验结果的解释和推论是否符合科学原理以及测 验道德 6、测验结果能否给被试以及所有关注测验结果的使用者 提供有益的帮助
结果分析的意义： 测验的结果效度分析，实质上是对一个测压在 应用和推论方面做出细心谨慎的承诺和必要的 科学反思，这对人们正确、规范、合理地使用 教育测验或各种评价表，起到积极地指导作用 和告诫作用。
五、效标关联效度及其估计方法
1.效标关联效度的含义 是指一个测验对于处于特定情境中的个体行为进行预测时的有效性 2.种类及适用范围 a同时效度 含义：测验分数与效标资料的取得约在同一时间内完成，计算这两种资 料的相关系数则代表测验的同时效度 适用范围：主要用于诊断现状，在于用更简单、更省时、更廉价和更有 效的测验分数来取代不易搜集的效标资料。 b预测效度 含义：在测验分数取得一段时间以后才获得效标资料，计算这两种资料 件的相关系数即代表测验的预测效度。 适用范围：预测某个个体将来的行为

结合公式σx2 =σT2 +σE2 观察分数的方差公式表示： σx2 =σV2 +σI2+σE2
方差是反映数据离散程度的指标，测量的目 的要最大限度地区分被试水平，也就是使 σx2变大，同时使σI2 σE2都变小，使σV2变大。 σV2越大表明测量的质量越高，即测量效度 越高 所以效度公式表示为 rxy2=σV2∕σx2

内容效度和标志关联效度

所以以上两种评价方法都可以用来作为分析结 构效度的证据
结构效度的验证方法
（1）验证内部寻找证据法 内容效度 答题过程分析 测验的同质性 因素分析法 （2）考察测验的证实效度法 差异被试比较法 理论上有差异的被试，通过比较测验结果判断是否能有 效的被区分，且差异方向一致 先后测试分析法 对于测量那些理论上比较稳定的心理品质的测验，可以 采用此方法
结构效度验证的一般步骤



提出有关理论结构说明，并据此设计测量用的 试题 提出可以验证该理论结构存在的假设说明 采用各种方法收集实际的资料，以验证第二步 提出的假设的正确性 收集其他类型的辅助证据，淘汰与理论结构相 反的试题，或是修正理论，并重复第二步和第 三步，直到上述的假设得到验证
涵盖范围
二、效度的统计定义

观察分数 一般观察分数是由一般真分数与误差真分数构成: X=T+E 其中T表示一半真分数，E表示随机误差 实质上一般真分数还可以还可以分为目标真分数(V)和非目 真分数(I) 所以观察分数可以表示为： X=V+I+E 测量效度实质上就是只一次测量测出目标真分数的程度 理论上目标真分数与非目标真分数是相互独立的 所以一般真分数方差公式表示：σT2 =σV2 +σI2