第四章 信度和效度1
合集下载
- 1、下载文档前请自行甄别文档内容的完整性，平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益，请联系客服反馈,我们会尽快为您处理(人工客服工作时间：9:00-18:30)。
• （一）构想效度的概念 • 构想效度是指测验能够测量到理论上的构想或特 质的程度。 • （二）确定构想效度的步骤 • 1.建立理论框架，以解释被试在测验中的表现； • 2.依据理论框架推演出各种有关测验成绩的假设； • 3.以逻辑和实证的方法验证假设。 • （三）常见的确定构想效度的指标 • 发展变化、与其他测验的相关、因素分析、内部 一致性。
（三）重测信度的评估
• • • • • • • • • • • 1.在进行重测信度评估时要注意： （1）重测信度一般只反映由随机因素导致的 变化，而不反映被试行为的长久变化； （2）不同行为受随机误差的影响不同。 2.重测信度的假设前提 （1）每一被试对前一次测验的遗忘程度相同； （2）每一被试在重测的间隔期内没有学习与 测验有关的其他材料。 3.注意：解决问题型的测验不适合采 用重测的方式来考察其信度；而感觉-运动 型测验或人格测验较适合采用重测的方式 来考察其信度。
第二节 信度的评估方法
一、重测信度 二、复本信度
一、重测信度的概念及间隔时间
• （一）重测信度的概念及理解 • 又称稳定性信度，指同一测验在不同的时间上对 同一群体先后施测两次的测验结果的一致性。这 两次测验结果的相关系数即为重测信度系数。 • （二）重测的间隔时间 • 重测信度所考察的误差来源主要是时间的变化所 带来的随机影响，因此，必须注意间隔时间的长 短。间隔时间的长短要根据测验的性质和目的来 确定。如果希望测验成绩能够预测较长时间的变 化，则间隔时间应该较长。 • （三）重测信度的评估（见下页）
• 一、效度的概念及其理解 • 是指测验的结果所反映的内容与想要考察的内容的关系， 二者越是吻合，效度就越高。 • 效度不仅要排除随机误差，而且还要排除系统误差。 • 二、效度的性质 • 效度指的是测量结果的效度；效度是连续性的； 效度同时也是针对目标而言的；效度是用已有的证据推理 而得到的。 • 三、效度与信度的关系 • 信度高，效度不一定高；效度高信度必定高。信度是效度 的必要条件，但不是充分条件。
第四节 素质测评中效度的评估
一、内容效度 二、效标关联效度 三、构想效度
一、内容效度
• （一）内容效度的概念 • 内容效度是检查测验内容是否是想要测量的行为 领域的代表性取样的指标。 • （二）内容效度分析时需要注意的问题 • 1.应避免将测验取样的行为领域过于泛化； • 2.要避免测验分数中无关因素的影响。 • （三）内容效度的评估方法 • 主要有：专家评判法、经验法、统计分析法。 • （四）内容效度的应用 • 内容效度最适合于评估教育和职业成就测验，也 适合于某些用于选拔和分类的人事测验，一般不 适用于能力倾向测验和人格测验。
第四章 信度和效度
第一节 信度的定义和作用 第二节 信度的评估方法 第三节 效度ห้องสมุดไป่ตู้定义性质以及 与信度的关系 第四节 素质测评中效度的评估
第一节 信度的定义和作用
• 一、信度的定义 • 信度是指测验结果的可靠性、稳定性和一致性，即指测验 结果是否反应了被试的稳定的、一贯的真实特征。 • 二、对信度定义的理解 • 测验结果与真实情况会有误差，误差又可分为系统误差和 随机误差，信度是从反面来考察随机误差大小的，随机误 差越大，信度就越低。反之，信度就越高。 • 三、信度的作用 • 1.解释真实分数与实得分数的相关 • 2.说明可以接受的信度水平
二、复本信度
• （一）复本信度的含义 • 又称等值性系数，是以两个功能等值而题目内容 不同的测验复本来测量同一群体，然后求得被试 在这两个测验上得分的相关系数。 • （二）计算复本信度的目的 • 在于考察两个测验复本的题目取样或内容取样是 否等值。 • （三）复本测验的间隔时间 • 两个复本在同一时间施测，相关系数便能较好反 映复本的信度。 • （四）复本信度的优缺点（见下页）
二、效标关联效度
• （一）效标关联效度的概念 • 也称效标效度，它反映测验分数与外在标准的相 关程度。 • （二）效标和效标测量 • 效标确定要客观；效标测量要准确，防止效标污 染。 • （三）常用的效标 • 学术成就、特殊训练成绩、实际工作表现、团体 对照、等级评定、先前有效的测验。
三、构想效度
（四）复本信度的优缺点
• 复本信度的主要优点在于： • 1.能够避免重测信度的关于记忆、练习等方 面的问题； • 2.减少了辅导、练习和作弊的可能性。 • 然而，它也存在其局限性 • 1.不能完全消除练习的影响； • 2.有些测验较难找到完全等值的复本。
第三节 效度的概念、性质以及与信 度的关系
（三）重测信度的评估
• • • • • • • • • • • 1.在进行重测信度评估时要注意： （1）重测信度一般只反映由随机因素导致的 变化，而不反映被试行为的长久变化； （2）不同行为受随机误差的影响不同。 2.重测信度的假设前提 （1）每一被试对前一次测验的遗忘程度相同； （2）每一被试在重测的间隔期内没有学习与 测验有关的其他材料。 3.注意：解决问题型的测验不适合采 用重测的方式来考察其信度；而感觉-运动 型测验或人格测验较适合采用重测的方式 来考察其信度。
第二节 信度的评估方法
一、重测信度 二、复本信度
一、重测信度的概念及间隔时间
• （一）重测信度的概念及理解 • 又称稳定性信度，指同一测验在不同的时间上对 同一群体先后施测两次的测验结果的一致性。这 两次测验结果的相关系数即为重测信度系数。 • （二）重测的间隔时间 • 重测信度所考察的误差来源主要是时间的变化所 带来的随机影响，因此，必须注意间隔时间的长 短。间隔时间的长短要根据测验的性质和目的来 确定。如果希望测验成绩能够预测较长时间的变 化，则间隔时间应该较长。 • （三）重测信度的评估（见下页）
• 一、效度的概念及其理解 • 是指测验的结果所反映的内容与想要考察的内容的关系， 二者越是吻合，效度就越高。 • 效度不仅要排除随机误差，而且还要排除系统误差。 • 二、效度的性质 • 效度指的是测量结果的效度；效度是连续性的； 效度同时也是针对目标而言的；效度是用已有的证据推理 而得到的。 • 三、效度与信度的关系 • 信度高，效度不一定高；效度高信度必定高。信度是效度 的必要条件，但不是充分条件。
第四节 素质测评中效度的评估
一、内容效度 二、效标关联效度 三、构想效度
一、内容效度
• （一）内容效度的概念 • 内容效度是检查测验内容是否是想要测量的行为 领域的代表性取样的指标。 • （二）内容效度分析时需要注意的问题 • 1.应避免将测验取样的行为领域过于泛化； • 2.要避免测验分数中无关因素的影响。 • （三）内容效度的评估方法 • 主要有：专家评判法、经验法、统计分析法。 • （四）内容效度的应用 • 内容效度最适合于评估教育和职业成就测验，也 适合于某些用于选拔和分类的人事测验，一般不 适用于能力倾向测验和人格测验。
第四章 信度和效度
第一节 信度的定义和作用 第二节 信度的评估方法 第三节 效度ห้องสมุดไป่ตู้定义性质以及 与信度的关系 第四节 素质测评中效度的评估
第一节 信度的定义和作用
• 一、信度的定义 • 信度是指测验结果的可靠性、稳定性和一致性，即指测验 结果是否反应了被试的稳定的、一贯的真实特征。 • 二、对信度定义的理解 • 测验结果与真实情况会有误差，误差又可分为系统误差和 随机误差，信度是从反面来考察随机误差大小的，随机误 差越大，信度就越低。反之，信度就越高。 • 三、信度的作用 • 1.解释真实分数与实得分数的相关 • 2.说明可以接受的信度水平
二、复本信度
• （一）复本信度的含义 • 又称等值性系数，是以两个功能等值而题目内容 不同的测验复本来测量同一群体，然后求得被试 在这两个测验上得分的相关系数。 • （二）计算复本信度的目的 • 在于考察两个测验复本的题目取样或内容取样是 否等值。 • （三）复本测验的间隔时间 • 两个复本在同一时间施测，相关系数便能较好反 映复本的信度。 • （四）复本信度的优缺点（见下页）
二、效标关联效度
• （一）效标关联效度的概念 • 也称效标效度，它反映测验分数与外在标准的相 关程度。 • （二）效标和效标测量 • 效标确定要客观；效标测量要准确，防止效标污 染。 • （三）常用的效标 • 学术成就、特殊训练成绩、实际工作表现、团体 对照、等级评定、先前有效的测验。
三、构想效度
（四）复本信度的优缺点
• 复本信度的主要优点在于： • 1.能够避免重测信度的关于记忆、练习等方 面的问题； • 2.减少了辅导、练习和作弊的可能性。 • 然而，它也存在其局限性 • 1.不能完全消除练习的影响； • 2.有些测验较难找到完全等值的复本。
第三节 效度的概念、性质以及与信 度的关系