量表质量分析
相关主题
- 1、下载文档前请自行甄别文档内容的完整性，平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益，请联系客服反馈,我们会尽快为您处理(人工客服工作时间：9:00-18:30)。
指的是测验内容的一致性或测验内部所有题目的一致性（项目同 质性）程度。又称同质性(homogeneity)信度。 计算同质性信度的方法 • • • 分半法 库德—理查逊公式法 α 系数或克伦巴赫公式法
量表质量分析：信度与效度
谷冠鹏 2014.1.19
1 項目分析（Item Analysis)
• 使用时机
问卷预试完后，根据样本填答的资料求出各题项的决断值（CR)， 若决断值没有达到显著水平，则该题项便允以删除。
• 案例说明
国道客运满意度问卷项目分析
步骤（SPSS操作）
• 输入问卷资料至SPSS – 若有反向题则需要以[Recode]来进行转换 • 加总全部题项的分数。 • 按总分排序 • 区分高低分组 – 以样本总分的前27%为高分组 – 以样本总分的后27%为低分组 • 独立样本t检验，检验每个题项在高低分组有无差异。若未达显著， 则删除。 • 求其各题项与总分之相关，若达显著水平，则不需删题。
这把尺子有问题。这是一个信度问题。
• 效度（Validity）：测验能够反映所要测量的特性的程度，反应问卷的 准确性或称为有效性。 对于一个标准测验来说，效度比信度更为重要。 • 其回答的问题是：
（1）测验的目的。测验测量的是什么东西?或者说，测验测到了它
要测的东西吗?
用一个英文版的智商量表来测量中国儿童的智商，可以吗？
计算极端值
利用统计量找出极端值
• 前27%的值为32 • 后27%的值为25
区分高低分组 用[Transform]/ [Recode] / [Into Different Variables] 将「total」变量分群。
输入以下信息，然后按「Old and New Value」
• 输入分群信息如下
• Group变量
– 1代表低分组 – 2代表高分组 – . 代表未分组
执行[Analyze] / [Compare Means] / [ Independent-Samples T test]
利用Group变量来进行 T test检验满意度8个题目有无差异。
结果说明：显示8个题目均具有鉴别度，可以保留。 • 先看变异数同质性考验之F值（Levene’s Test) – F值之p-value < 0.05 看 Equal variances not assumed之t值 – F值之p-value > 0.05 看 Equal variances assumed之t值 • 各题项之t值便是CR值
满意度问卷～整体满意度部分
满意度问卷～社经背景
STEP 1 开启资料
• • •
STEP 2 加总分数 我们以问卷第三部分～整体满意度之第1~8题来当范例。 选[Transform]/[Compute] 来加总分数。
• 输入以下公式，然后选OK。将总分储存于「Total」变量中。
• 用[Analyze] /[Descripitive Statistics] /[Frequencies]求出前27%與後 27%的值。
稳定性与等值性(Stability and Equivalent)信度
如果两个复本测验是相距较长一段时间分两次施测的，同一组被 试施测结果的一致性程度。 • • 是一种最为严格的信度指标 时间间隔施测，内容变异＋重测信度误差
形式：复本A—适当时间—复本B
2.3 内部一致性(internal consistency)信度
STEP6 求算与各题项之相关 • [Analyze]/[Correlate]/[Bivariate]
用Person求出变量与总分间相关程度 • 将问卷各题项（8题）及「Total」变量放入Variable方块，并勾选「 Person」、「Two-tailed」、「Flag significant correlation」。
（2）测量精确度和真实性。测验对它所测量的东西测量到什么程度
?
2 信度
2.1 重测信度（Test-Retest Reliability） 用同一个量表，对同一组被试，在不同时间施测两次，所得结果
。 的一致性程度。 通常用同一组被试在两次测验上所得分数的皮尔逊
积差相关系数来表示。
首测（X1） 时间间隔 相关系数r 再测（X2）
测验A（X1） 最短时间 相关系数r 测验B（X2）
使用的前提条件：
• • • • • • （1）施测所用的两个复本必须是真正平行的测验 各份测验测量的是同一种心理特性。 各份测验具有相同的内容和形式。 各份测验的题目不应重复。 各份测验题目数量相等，难度和区分度大体相同。 各份测验的分数分布（平均数和标准差）大致相等。 复本编好后，应再测一次，以确保各份测验的等值。 （2）被试要有条件接受两个测验。 ★ 注意排除施测顺序的影响 在报告结果时，应报告两次施测的间隔，及在此间隔内被试的有关 经历。
• 年幼儿童，间隔要小；年长群体，间隔可大。智力测验的间隔不能太 短，成就测验的间隔不能太长。 • 一般间隔时间不超过六个月。（即不能让被试记住上一次测验的内容， 又不能让其特质发生变化，或对所学知识产生遗忘）
2.2 复本信度（ Alternate-form Reliability ）
• 用两个平行测验（同一测验的两个复本）在相距最短时间内，测量同 一组被试所得结果的一致性程度。通常用同一组被试在两个复本测验 上所得分数的皮尔逊积差相关系数来表示。又称等值性信度。
使用的前提条件：
（1）测验所测的特质必须是稳定的，即被测的特征和属性在两次 测验之间没有发生变化 （2）把握适当的时间间隔，遗忘和练习的效果基本上相互抵消 （3）两次施测期间被试的学习效果没有差别
时间间隔的把握：
• 间隔时间越长，稳定性系数越低。适宜时间间隔依照测验目的、性质
及被试特点而定。几分钟至几年。
• 由右表可知，各题项与 总分相关皆达显著水平 （p < 0.01)，因此此8 个题项皆可保留。
信Fra Baidu bibliotek与效度：初步知识
• 信度（Reliability）：测量结果的稳定性 、 可靠性程度。
用同一把尺子测量张三的身高，第一天测得175cm，
第二天测得170cm，第三天再测181cm。误差相当大，说明
量表质量分析：信度与效度
谷冠鹏 2014.1.19
1 項目分析（Item Analysis)
• 使用时机
问卷预试完后，根据样本填答的资料求出各题项的决断值（CR)， 若决断值没有达到显著水平，则该题项便允以删除。
• 案例说明
国道客运满意度问卷项目分析
步骤（SPSS操作）
• 输入问卷资料至SPSS – 若有反向题则需要以[Recode]来进行转换 • 加总全部题项的分数。 • 按总分排序 • 区分高低分组 – 以样本总分的前27%为高分组 – 以样本总分的后27%为低分组 • 独立样本t检验，检验每个题项在高低分组有无差异。若未达显著， 则删除。 • 求其各题项与总分之相关，若达显著水平，则不需删题。
这把尺子有问题。这是一个信度问题。
• 效度（Validity）：测验能够反映所要测量的特性的程度，反应问卷的 准确性或称为有效性。 对于一个标准测验来说，效度比信度更为重要。 • 其回答的问题是：
（1）测验的目的。测验测量的是什么东西?或者说，测验测到了它
要测的东西吗?
用一个英文版的智商量表来测量中国儿童的智商，可以吗？
计算极端值
利用统计量找出极端值
• 前27%的值为32 • 后27%的值为25
区分高低分组 用[Transform]/ [Recode] / [Into Different Variables] 将「total」变量分群。
输入以下信息，然后按「Old and New Value」
• 输入分群信息如下
• Group变量
– 1代表低分组 – 2代表高分组 – . 代表未分组
执行[Analyze] / [Compare Means] / [ Independent-Samples T test]
利用Group变量来进行 T test检验满意度8个题目有无差异。
结果说明：显示8个题目均具有鉴别度，可以保留。 • 先看变异数同质性考验之F值（Levene’s Test) – F值之p-value < 0.05 看 Equal variances not assumed之t值 – F值之p-value > 0.05 看 Equal variances assumed之t值 • 各题项之t值便是CR值
满意度问卷～整体满意度部分
满意度问卷～社经背景
STEP 1 开启资料
• • •
STEP 2 加总分数 我们以问卷第三部分～整体满意度之第1~8题来当范例。 选[Transform]/[Compute] 来加总分数。
• 输入以下公式，然后选OK。将总分储存于「Total」变量中。
• 用[Analyze] /[Descripitive Statistics] /[Frequencies]求出前27%與後 27%的值。
稳定性与等值性(Stability and Equivalent)信度
如果两个复本测验是相距较长一段时间分两次施测的，同一组被 试施测结果的一致性程度。 • • 是一种最为严格的信度指标 时间间隔施测，内容变异＋重测信度误差
形式：复本A—适当时间—复本B
2.3 内部一致性(internal consistency)信度
STEP6 求算与各题项之相关 • [Analyze]/[Correlate]/[Bivariate]
用Person求出变量与总分间相关程度 • 将问卷各题项（8题）及「Total」变量放入Variable方块，并勾选「 Person」、「Two-tailed」、「Flag significant correlation」。
（2）测量精确度和真实性。测验对它所测量的东西测量到什么程度
?
2 信度
2.1 重测信度（Test-Retest Reliability） 用同一个量表，对同一组被试，在不同时间施测两次，所得结果
。 的一致性程度。 通常用同一组被试在两次测验上所得分数的皮尔逊
积差相关系数来表示。
首测（X1） 时间间隔 相关系数r 再测（X2）
测验A（X1） 最短时间 相关系数r 测验B（X2）
使用的前提条件：
• • • • • • （1）施测所用的两个复本必须是真正平行的测验 各份测验测量的是同一种心理特性。 各份测验具有相同的内容和形式。 各份测验的题目不应重复。 各份测验题目数量相等，难度和区分度大体相同。 各份测验的分数分布（平均数和标准差）大致相等。 复本编好后，应再测一次，以确保各份测验的等值。 （2）被试要有条件接受两个测验。 ★ 注意排除施测顺序的影响 在报告结果时，应报告两次施测的间隔，及在此间隔内被试的有关 经历。
• 年幼儿童，间隔要小；年长群体，间隔可大。智力测验的间隔不能太 短，成就测验的间隔不能太长。 • 一般间隔时间不超过六个月。（即不能让被试记住上一次测验的内容， 又不能让其特质发生变化，或对所学知识产生遗忘）
2.2 复本信度（ Alternate-form Reliability ）
• 用两个平行测验（同一测验的两个复本）在相距最短时间内，测量同 一组被试所得结果的一致性程度。通常用同一组被试在两个复本测验 上所得分数的皮尔逊积差相关系数来表示。又称等值性信度。
使用的前提条件：
（1）测验所测的特质必须是稳定的，即被测的特征和属性在两次 测验之间没有发生变化 （2）把握适当的时间间隔，遗忘和练习的效果基本上相互抵消 （3）两次施测期间被试的学习效果没有差别
时间间隔的把握：
• 间隔时间越长，稳定性系数越低。适宜时间间隔依照测验目的、性质
及被试特点而定。几分钟至几年。
• 由右表可知，各题项与 总分相关皆达显著水平 （p < 0.01)，因此此8 个题项皆可保留。
信Fra Baidu bibliotek与效度：初步知识
• 信度（Reliability）：测量结果的稳定性 、 可靠性程度。
用同一把尺子测量张三的身高，第一天测得175cm，
第二天测得170cm，第三天再测181cm。误差相当大，说明