信效度分析
合集下载
相关主题
- 1、下载文档前请自行甄别文档内容的完整性，平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益，请联系客服反馈,我们会尽快为您处理(人工客服工作时间：9:00-18:30)。
信效度分析
流统系 李昱
信度分析
• • • • • 重测信度 分半信度 内部一致信度 复本信度 评分者信度
重测信度
• 意义 • 指标：ICC、Kappa • 使用范围：连续资料（ICC） 等级资料（ICC、Kappa） • 值界点：(>0.75、0.4—0.75、<0.4)
Baidu Nhomakorabea
数据排列方式
Id
1 2 3 4
结果解读
• 前提： KMO • 判断标准： 1、累计方差贡献率：>40% 2、高低有别（0.4） 3、特征根（0.4） • 与假定结构比对
校标效度
• 找一个标准 • 与标准的结果做相关
Were raters drawn from larger pool?
Yes No
Did the same subset of raters rate each target?
Two-way mixed
No
Yes
One-way Random
Two-way random
For two-way models you must choose TYPE as well (Consideration 2: Individual rater variability): consistency (interested in whether targets ranked the same) absolute agreement (interested in whether targets got exact same scores)
test1
2 1 2 3
test2
1 2 2 3
5
6 7
4
5 4
4
5 4
Kappa
• Analyze-descriptive statistics-crosstabs
Kappa结果
ICC
Analyze-scale-reliability analysis
ICC Model Decision Tree (Consideration 1: Raters)
I-CVI：1 or ≥0.78 S-CVI/UA>0.8; S-CVI/Ave>0.9 Kappa:
结构效度
• 意义：问卷所要测量的概念能显示出科学 的意义并符合理论上的设想 • 操作步骤： ananlyze-data reduction-factor analysis Descriptiv: KMO勾选 Extraction: Scree Plot Rotation: Varimax
10
折半信度
• 意义 • 算法：公式、软件
SPSS：Analyze-scale-reliability analysis
折半信度
• 优势：1、同一时点 2、记忆效应 • 缺陷 1、严格性 2、多种组合
内部一致信度
• 意义 • 指标：克朗巴哈系数 • 下界值： 基础研究中:0.8 探索研究中:0.7 实务研究中:0.6 上界值 • 与ICC区别：一次调查，多个概念 一个概念，多次调查
克朗巴哈系数操作
• Analyze-scale-reliability analysis • 注意:选子菜单里的Correlations选项
信度计算汇总
效度分析
效度分析
• 内容效度 • 结构效度 • 效标效度
内容效度
• 意义 • 专家评价：≥3，最好≥5，>10-no； 2名内容专家，1名工具构建专家。 • 评价内容:与概念的相关性 • 指标：I-CVI；S-CVI
流统系 李昱
信度分析
• • • • • 重测信度 分半信度 内部一致信度 复本信度 评分者信度
重测信度
• 意义 • 指标：ICC、Kappa • 使用范围：连续资料（ICC） 等级资料（ICC、Kappa） • 值界点：(>0.75、0.4—0.75、<0.4)
Baidu Nhomakorabea
数据排列方式
Id
1 2 3 4
结果解读
• 前提： KMO • 判断标准： 1、累计方差贡献率：>40% 2、高低有别（0.4） 3、特征根（0.4） • 与假定结构比对
校标效度
• 找一个标准 • 与标准的结果做相关
Were raters drawn from larger pool?
Yes No
Did the same subset of raters rate each target?
Two-way mixed
No
Yes
One-way Random
Two-way random
For two-way models you must choose TYPE as well (Consideration 2: Individual rater variability): consistency (interested in whether targets ranked the same) absolute agreement (interested in whether targets got exact same scores)
test1
2 1 2 3
test2
1 2 2 3
5
6 7
4
5 4
4
5 4
Kappa
• Analyze-descriptive statistics-crosstabs
Kappa结果
ICC
Analyze-scale-reliability analysis
ICC Model Decision Tree (Consideration 1: Raters)
I-CVI：1 or ≥0.78 S-CVI/UA>0.8; S-CVI/Ave>0.9 Kappa:
结构效度
• 意义：问卷所要测量的概念能显示出科学 的意义并符合理论上的设想 • 操作步骤： ananlyze-data reduction-factor analysis Descriptiv: KMO勾选 Extraction: Scree Plot Rotation: Varimax
10
折半信度
• 意义 • 算法：公式、软件
SPSS：Analyze-scale-reliability analysis
折半信度
• 优势：1、同一时点 2、记忆效应 • 缺陷 1、严格性 2、多种组合
内部一致信度
• 意义 • 指标：克朗巴哈系数 • 下界值： 基础研究中:0.8 探索研究中:0.7 实务研究中:0.6 上界值 • 与ICC区别：一次调查，多个概念 一个概念，多次调查
克朗巴哈系数操作
• Analyze-scale-reliability analysis • 注意:选子菜单里的Correlations选项
信度计算汇总
效度分析
效度分析
• 内容效度 • 结构效度 • 效标效度
内容效度
• 意义 • 专家评价：≥3，最好≥5，>10-no； 2名内容专家，1名工具构建专家。 • 评价内容:与概念的相关性 • 指标：I-CVI；S-CVI