信度与效度分析
合集下载
相关主题
- 1、下载文档前请自行甄别文档内容的完整性，平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益，请联系客服反馈,我们会尽快为您处理(人工客服工作时间：9:00-18:30)。
第八章 信度与效度分析
2020/5/12
1
信度
•測量到的結果不管任何時間都一致， 不會 有誤差。
•測量誤差可用E=X-T表示，X是觀察到的特 質，T是真實特質。
• 信度高的測量， 才有信心用來預測未來。
2020/5/12
2
信度的涵义
• 什么是信度（Reliability） 即是指测量工具本身的可靠程度。信度分析亦称为
缺点： ➢ 受试者具有学习功能，测试结果易受记忆及经验的影响，从而导致假
性高相关 ➢ 两次测试难时有相同的测试情境 ➢ 两次测试的间隔时间并没有统一标准，较难把握
2020/5/12
6
复本信度
• 复本信度
是以两个测验复本（在内容、型式、题数、难度、指导说明、时间限
制与例题等方面，必须类似或相等 ）来测量同一群体，然后求得应 试者在这两个测验上得分的相关系数。复本信度的高低反映了这两个 测量复本在内容上的等值性程度，亦称等值性系数(coefficient of equivalence) 。
18
效度的类型
由于效度是相对于研究目的和研究侧面而言的，具有多层面 的特征，因此效度具有多种类型。主要有：
➢内容效度(content validity)
➢效标关联效度(criterion-related validity)
➢构念效度(construct validity)
2020/5/12
19
内Βιβλιοθήκη Baidu效度
计算再测信度与复本信度的共同问题是：
需要进行两次测量。受试者的合作、动机、疲劳和厌烦等 都可能影响测验的实施。因此，寻求只根据一次测验结果 就可以估计信度的方法
2020/5/12
8
折半信度
• 折半信度(split-half reliability)
指使用测量工具先对一组受试者施测，然 后把题目分成两半计分，依两半所得的分 数算出相关系数 。在无副本且不准备重测 的情况下，我们就用折半信度来计算信度 系数，类似于复本信度。
效度与测量目的相关，同一种测量工具在某些测量中具有高效度，但在 另一些测量中却效度不高。 例如：一把信度很高的尺子在测量身高时具有很好的效度，但在测 量血压时效度显然不佳。
因此有人将效度定义为：
测验能够达到某种目的的程度(Mehens & Lehmann, 1978, p.109)
2020/5/12
2020/5/12
16
效度的例子
• 溫度計---可以用來測溫度，但是不會有人 拿來測溼度。
• 倍數高的望遠鏡可以幫我們測量行星之間 的距離。
• 用X光或超音波測量骨密度。 • 用巴式量表測量身體功能 • 用GRE測量留學生的智力
2020/5/12
17
效度的涵义
效度的涵义：
简言之，就是测量结果的有效性。 或某项测量活动能够测量到测量者所希望了解的特性的程度。
2020/5/12
11
Cronbach‘s 系数
2020/5/12
12
信度的检验标准
• 信度 .30 不可信 • .30 信度 .40 初步的研究，勉强可信 • .40 信度 .50 稍微可信 • .50 信度 .70 可信(最常见的信度范围) • .70 信度 .90 很可信(次常见的信度范围) • .90 信度 十分可信
可靠性分析。 两个方面：测量结果的稳定性和一致性
稳定性高的测量工具则是指一群人在不同时空下接受同样的衡量工具时， 结果的差异很小。
反例：一把尺子在上午和下午测量同一个人的身高，相差5厘米。 一致性高的测量工具是指同一群人接受性质相同，题型相同，目的相同
的不同问卷测量后，在各衡量结果间显示出强烈的正相关。
➢复本信度（alternative-form reliability）
➢内部一致性信度（internal consistency
reliability）
2020/5/12
5
再测信度
• 再测信度
同一个测量工具在不同的时间对同一受试者重复测量两次，两次测量 结果的相关系数即为再测信度。这一指标反映测量工具的稳定性，亦 称为稳定系数(coefficient of stability)
实施方法： 同时实施：测量一致性，获得等值性系数
： ， 间隔实施 测量稳定性和一致性 获得稳定与等值系数 (coefficient of
stability and equivalence)
2020/5/12
7
复本信度
缺点：
➢ 复本测验的编制不易，不但费时，且成本较高
➢ 易受练习影响的测量行为，即使采用复本方法，影响只能 减少，但无法完全避免
计算折半信度的模型有：Spearman-Brown公 式, Guttman公式, Rulon公式。
2020/5/12
9
内部一致性信度
涵义：
折半信度高表明内部项目的相关性高，这实际上反映的是测量工具内部 各项目之间的一致性问题，因此衍生出内部一致性信度。
内部一致性信度是指量表内容与题目之间的关系，考察的是量表的各个 题目是否测量了相同的内容或特质。例如：市场导向的测量量表
计算内部一致性信度的常用方法： Cronbach‘s 系数
2020/5/12
10
Cronbach‘s 系数
• LeeJ．Cronbach，伊利诺伊大学教授，心 理测量学家。1951年将库德-理查德20(适 合与0，1记分的信度计算公式)进一步推广， 提出著名的多重记分项目的信度计算公式，
即著名的一致性系数
反例：测量血压的不同工具得出的结果相差很大
2020/5/12
3
信度的例子
•儀器的信度：視力、 聽力、 體重、心跳速 度等。
•測驗的信度：考試、 智力測驗。 •問卷的信度：受訪者的回答， 包括態度、
行為、 事實等等。
2020/5/12
4
信度的类型
不同的测量方式导致不同类型的信度
➢再测信度(test-retest reliability)
2020/5/12
13
• SPSS分析信度案例
2020/5/12
14
效度分析 （validity analysis）
2020/5/12
15
效度
• 測量能夠測到真正的特質， 即效度。 • X=T+E。 E若一直為0就是有效度。 E若是
不為0但是為一固定常數， 就是有信度。所 以信度可以說是效度的必要條件。 • 有信度不一定有效度， 有效度則一定有信 度。
涵义：
内容效度是指测量工具的内容是否能够代表所欲测量的行为领域，即 量表内容是否具有代表性。 例如：一位教师给学生做一个数学测验，该测验的题目如果涵盖了教 学所欲达成的目标，及教材的重要内容，我们说该测验有内容效度。
2020/5/12
1
信度
•測量到的結果不管任何時間都一致， 不會 有誤差。
•測量誤差可用E=X-T表示，X是觀察到的特 質，T是真實特質。
• 信度高的測量， 才有信心用來預測未來。
2020/5/12
2
信度的涵义
• 什么是信度（Reliability） 即是指测量工具本身的可靠程度。信度分析亦称为
缺点： ➢ 受试者具有学习功能，测试结果易受记忆及经验的影响，从而导致假
性高相关 ➢ 两次测试难时有相同的测试情境 ➢ 两次测试的间隔时间并没有统一标准，较难把握
2020/5/12
6
复本信度
• 复本信度
是以两个测验复本（在内容、型式、题数、难度、指导说明、时间限
制与例题等方面，必须类似或相等 ）来测量同一群体，然后求得应 试者在这两个测验上得分的相关系数。复本信度的高低反映了这两个 测量复本在内容上的等值性程度，亦称等值性系数(coefficient of equivalence) 。
18
效度的类型
由于效度是相对于研究目的和研究侧面而言的，具有多层面 的特征，因此效度具有多种类型。主要有：
➢内容效度(content validity)
➢效标关联效度(criterion-related validity)
➢构念效度(construct validity)
2020/5/12
19
内Βιβλιοθήκη Baidu效度
计算再测信度与复本信度的共同问题是：
需要进行两次测量。受试者的合作、动机、疲劳和厌烦等 都可能影响测验的实施。因此，寻求只根据一次测验结果 就可以估计信度的方法
2020/5/12
8
折半信度
• 折半信度(split-half reliability)
指使用测量工具先对一组受试者施测，然 后把题目分成两半计分，依两半所得的分 数算出相关系数 。在无副本且不准备重测 的情况下，我们就用折半信度来计算信度 系数，类似于复本信度。
效度与测量目的相关，同一种测量工具在某些测量中具有高效度，但在 另一些测量中却效度不高。 例如：一把信度很高的尺子在测量身高时具有很好的效度，但在测 量血压时效度显然不佳。
因此有人将效度定义为：
测验能够达到某种目的的程度(Mehens & Lehmann, 1978, p.109)
2020/5/12
2020/5/12
16
效度的例子
• 溫度計---可以用來測溫度，但是不會有人 拿來測溼度。
• 倍數高的望遠鏡可以幫我們測量行星之間 的距離。
• 用X光或超音波測量骨密度。 • 用巴式量表測量身體功能 • 用GRE測量留學生的智力
2020/5/12
17
效度的涵义
效度的涵义：
简言之，就是测量结果的有效性。 或某项测量活动能够测量到测量者所希望了解的特性的程度。
2020/5/12
11
Cronbach‘s 系数
2020/5/12
12
信度的检验标准
• 信度 .30 不可信 • .30 信度 .40 初步的研究，勉强可信 • .40 信度 .50 稍微可信 • .50 信度 .70 可信(最常见的信度范围) • .70 信度 .90 很可信(次常见的信度范围) • .90 信度 十分可信
可靠性分析。 两个方面：测量结果的稳定性和一致性
稳定性高的测量工具则是指一群人在不同时空下接受同样的衡量工具时， 结果的差异很小。
反例：一把尺子在上午和下午测量同一个人的身高，相差5厘米。 一致性高的测量工具是指同一群人接受性质相同，题型相同，目的相同
的不同问卷测量后，在各衡量结果间显示出强烈的正相关。
➢复本信度（alternative-form reliability）
➢内部一致性信度（internal consistency
reliability）
2020/5/12
5
再测信度
• 再测信度
同一个测量工具在不同的时间对同一受试者重复测量两次，两次测量 结果的相关系数即为再测信度。这一指标反映测量工具的稳定性，亦 称为稳定系数(coefficient of stability)
实施方法： 同时实施：测量一致性，获得等值性系数
： ， 间隔实施 测量稳定性和一致性 获得稳定与等值系数 (coefficient of
stability and equivalence)
2020/5/12
7
复本信度
缺点：
➢ 复本测验的编制不易，不但费时，且成本较高
➢ 易受练习影响的测量行为，即使采用复本方法，影响只能 减少，但无法完全避免
计算折半信度的模型有：Spearman-Brown公 式, Guttman公式, Rulon公式。
2020/5/12
9
内部一致性信度
涵义：
折半信度高表明内部项目的相关性高，这实际上反映的是测量工具内部 各项目之间的一致性问题，因此衍生出内部一致性信度。
内部一致性信度是指量表内容与题目之间的关系，考察的是量表的各个 题目是否测量了相同的内容或特质。例如：市场导向的测量量表
计算内部一致性信度的常用方法： Cronbach‘s 系数
2020/5/12
10
Cronbach‘s 系数
• LeeJ．Cronbach，伊利诺伊大学教授，心 理测量学家。1951年将库德-理查德20(适 合与0，1记分的信度计算公式)进一步推广， 提出著名的多重记分项目的信度计算公式，
即著名的一致性系数
反例：测量血压的不同工具得出的结果相差很大
2020/5/12
3
信度的例子
•儀器的信度：視力、 聽力、 體重、心跳速 度等。
•測驗的信度：考試、 智力測驗。 •問卷的信度：受訪者的回答， 包括態度、
行為、 事實等等。
2020/5/12
4
信度的类型
不同的测量方式导致不同类型的信度
➢再测信度(test-retest reliability)
2020/5/12
13
• SPSS分析信度案例
2020/5/12
14
效度分析 （validity analysis）
2020/5/12
15
效度
• 測量能夠測到真正的特質， 即效度。 • X=T+E。 E若一直為0就是有效度。 E若是
不為0但是為一固定常數， 就是有信度。所 以信度可以說是效度的必要條件。 • 有信度不一定有效度， 有效度則一定有信 度。
涵义：
内容效度是指测量工具的内容是否能够代表所欲测量的行为领域，即 量表内容是否具有代表性。 例如：一位教师给学生做一个数学测验，该测验的题目如果涵盖了教 学所欲达成的目标，及教材的重要内容，我们说该测验有内容效度。