《信度与效度分析》PPT课件
合集下载
信度与效度分析ppt课件
相关是否显著判断是否有效。
聚合效度
聚合效度也称为收敛效度，是指运用不同测量方法测定同一特质所得结果的相似
5
程度，即对同一特质的两种或多种测定方法间应有较高的相关性。
判别效度 判别效度，是指运测定不同特质和内涵时，测量结果之间不应有太大的相关性。
可编辑课件
8
效度分析的应用
《组织结构、创新与企业绩效》 李忆等 管理工程学报 2009年 收敛效度：较好的收敛效度，是指例如在企业绩效量表，运用不同的市
6
可编辑课件
10
谢谢！
可编辑课件
11
感谢亲观看此幻灯片，此课件部分内容来源于网络， 如有侵权请及时联系我们删除，谢谢配合！
重测信度法是指用同样的问卷对同一组被调查者间隔一定时间重复施测，计算两 次施测结果的相关系数。
复本信次填答两份问卷复本，计算两个复本的相关系数。
折半信度法（内在一致性系数）
折半信度法是将调查项目分为两半，计算两半得分的相关系数，进而估计整个量 表的信度。常用于态度、意见式问卷。
信度分析的方法33信度分析的应用内部一致性?组织结构创新不企业绩效李忆等管理工程学报2009年以企业绩效量表为例系数均大于07内部一致性信度高则表示量表中的市场份额营业额盈利能力等六个方面在得分间的一致性
信度与效度分析
企业管理 王梦茜
可编辑课件
1
目录
一、什么是信度？ 二、信度分析的方法 三、信度分析的应用 四、什么是效度？ 五、效度分析的指标与方法 六、效度分析的应用
G. 理查德·谢尔
可编辑课件
2
1
什么是信度？
定义：信度是指调查统计结果的稳定性或一致性，也就是对同一调查 对象多次重复进行调查或测量，所得结果的一致程度.
聚合效度
聚合效度也称为收敛效度，是指运用不同测量方法测定同一特质所得结果的相似
5
程度，即对同一特质的两种或多种测定方法间应有较高的相关性。
判别效度 判别效度，是指运测定不同特质和内涵时，测量结果之间不应有太大的相关性。
可编辑课件
8
效度分析的应用
《组织结构、创新与企业绩效》 李忆等 管理工程学报 2009年 收敛效度：较好的收敛效度，是指例如在企业绩效量表，运用不同的市
6
可编辑课件
10
谢谢！
可编辑课件
11
感谢亲观看此幻灯片，此课件部分内容来源于网络， 如有侵权请及时联系我们删除，谢谢配合！
重测信度法是指用同样的问卷对同一组被调查者间隔一定时间重复施测，计算两 次施测结果的相关系数。
复本信次填答两份问卷复本，计算两个复本的相关系数。
折半信度法（内在一致性系数）
折半信度法是将调查项目分为两半，计算两半得分的相关系数，进而估计整个量 表的信度。常用于态度、意见式问卷。
信度分析的方法33信度分析的应用内部一致性?组织结构创新不企业绩效李忆等管理工程学报2009年以企业绩效量表为例系数均大于07内部一致性信度高则表示量表中的市场份额营业额盈利能力等六个方面在得分间的一致性
信度与效度分析
企业管理 王梦茜
可编辑课件
1
目录
一、什么是信度？ 二、信度分析的方法 三、信度分析的应用 四、什么是效度？ 五、效度分析的指标与方法 六、效度分析的应用
G. 理查德·谢尔
可编辑课件
2
1
什么是信度？
定义：信度是指调查统计结果的稳定性或一致性，也就是对同一调查 对象多次重复进行调查或测量，所得结果的一致程度.
《信度与效度分析》PPT课件
计算内部一致性信度的常用方法： Cronbach‘s 系数
20.12.2020
h
8
Cronbach‘s 系数
• LeeJ．Cronbach，伊利诺伊大学教授，心 理测量学家。1951年将库德-理查德20(适 合与0，1记分的信度计算公式)进一步推广， 提出著名的多重记分项目的信度计算公式，
即著名的一致性系数
实施方法： 同时实施：测量一致性，获得等值性系数
： ， 间隔实施 测量稳定性和一致性 获得稳定与等值系数 (coefficient of
stability and equivalence)
20.12.2020
h
5
复本信度
缺点：
➢ 复本测验的编制不易，不但费时，且成本较高
➢ 易受练习影响的测量行为，即使采用复本方法，影响只能 减少，但无法完全避免
根据选择效标的时间不同，可分为：同时效度和预测效度 同时效度(concurrent validity) ：是指测验分数与实施测验同一个时间所取得的效
标之间的相关，旨在使用测验分数估计个人在效标方面的目前实际表现。 例如测量学生智力时，将学生当时的成绩作为效标。
计算再测信度与复本信度的共同问题是：
需要进行两次测量。受试者的合作、动机、疲劳和厌烦等 都可能影响测验的实施。因此，寻求只根据一次测验结果 就可以估计信度的方法
20.12.2020
h
6
折半信度
• 折半信度(split-half reliability)
指使用测量工具先对一组受试者施测，然后把题 目分成两半计分，依两半所得的分数算出相关系 数 。在无副本且不准备重测的情况下，我们就用 折半信度来计算信度系数，类似于复本信度。
reliability）
20.12.2020
h
8
Cronbach‘s 系数
• LeeJ．Cronbach，伊利诺伊大学教授，心 理测量学家。1951年将库德-理查德20(适 合与0，1记分的信度计算公式)进一步推广， 提出著名的多重记分项目的信度计算公式，
即著名的一致性系数
实施方法： 同时实施：测量一致性，获得等值性系数
： ， 间隔实施 测量稳定性和一致性 获得稳定与等值系数 (coefficient of
stability and equivalence)
20.12.2020
h
5
复本信度
缺点：
➢ 复本测验的编制不易，不但费时，且成本较高
➢ 易受练习影响的测量行为，即使采用复本方法，影响只能 减少，但无法完全避免
根据选择效标的时间不同，可分为：同时效度和预测效度 同时效度(concurrent validity) ：是指测验分数与实施测验同一个时间所取得的效
标之间的相关，旨在使用测验分数估计个人在效标方面的目前实际表现。 例如测量学生智力时，将学生当时的成绩作为效标。
计算再测信度与复本信度的共同问题是：
需要进行两次测量。受试者的合作、动机、疲劳和厌烦等 都可能影响测验的实施。因此，寻求只根据一次测验结果 就可以估计信度的方法
20.12.2020
h
6
折半信度
• 折半信度(split-half reliability)
指使用测量工具先对一组受试者施测，然后把题 目分成两半计分，依两半所得的分数算出相关系 数 。在无副本且不准备重测的情况下，我们就用 折半信度来计算信度系数，类似于复本信度。
reliability）
人员测评的信度与效度ppt课件
如，一个数学推理能力测评与数学课成绩 的相关就是会聚效度；而该测评与阅读理解能 力测评的相关显著低，就是区分效度。
6.2 .3影响效度的因素 测评本身带来的影响因素
1．测评题目的质量 2．实施测评时的于扰因素 3．被试的影响因素 4．测评的长度 样本团体的性质 效标的性质
如果其他条件相同，所测评的行为或心理 特质与效标行为或特质越相似，效度系数就越 高。
ST SX
它是
真实分数标准差与实得分数标准差的比率。
其中，rxr 有时也称为信度指数，它是真实分数 标准差与实得分数标准差的比率。
方差：即每个被测评者得分与其算术平均
数差的平方和与总个数之商。公式：
Sx2
2
xx N
标准差公式： Sx
2
xx N
还可通过分析个人分数再测时的变化（误 差）来考察信度。两次测评分数的差异越大， 信度就越低。
r' xx rxxSx'/ Sx 1 r2xxSx' / Sx2
其中, r' xx 为估计的信度；rxx 为取样的信度；SSxX
为取样团体的标准差；Sx' 为估计团体（取样的
总体）的标准差。
3)不同团体间能力水平的差异
2.测评的长度
信度还会受测评长度（即题目的多少） 的影响。一般来说，测评越长，信度值 越高。
6.2 .1人员测评的有效性
效度的理论定义：与测评目标有关的真实 分数方差与总分方差的比率。 公式：
rxr
SV 2 SX 2
其中，rxr 为测评效度； S为V 2 有效方差； S为X 2 总方差。
信度和效度的关系
信度考虑系统误差和随机误差；效度误差 还包括对测评目的无关的变量所引起的系统误 差。
6.2 .3影响效度的因素 测评本身带来的影响因素
1．测评题目的质量 2．实施测评时的于扰因素 3．被试的影响因素 4．测评的长度 样本团体的性质 效标的性质
如果其他条件相同，所测评的行为或心理 特质与效标行为或特质越相似，效度系数就越 高。
ST SX
它是
真实分数标准差与实得分数标准差的比率。
其中，rxr 有时也称为信度指数，它是真实分数 标准差与实得分数标准差的比率。
方差：即每个被测评者得分与其算术平均
数差的平方和与总个数之商。公式：
Sx2
2
xx N
标准差公式： Sx
2
xx N
还可通过分析个人分数再测时的变化（误 差）来考察信度。两次测评分数的差异越大， 信度就越低。
r' xx rxxSx'/ Sx 1 r2xxSx' / Sx2
其中, r' xx 为估计的信度；rxx 为取样的信度；SSxX
为取样团体的标准差；Sx' 为估计团体（取样的
总体）的标准差。
3)不同团体间能力水平的差异
2.测评的长度
信度还会受测评长度（即题目的多少） 的影响。一般来说，测评越长，信度值 越高。
6.2 .1人员测评的有效性
效度的理论定义：与测评目标有关的真实 分数方差与总分方差的比率。 公式：
rxr
SV 2 SX 2
其中，rxr 为测评效度； S为V 2 有效方差； S为X 2 总方差。
信度和效度的关系
信度考虑系统误差和随机误差；效度误差 还包括对测评目的无关的变量所引起的系统误 差。
量表的信度与效度分析计算ppt课件
6
1、稳定性分析 方法： 用“再测信度”来测量稳定性 再测信度：两次测量结果间的相关系数
相关系数越接近 1，表示稳定性越好
7
1、稳定性分析 缺点： 一般应用中很难真正实现（人力、财力、时间） 再测信度的应用有局限性 • 第一次的测量可能会影响到第二次（信度偏高）
• 两次测量间客观的情况可能有变化（信度偏低）
解： m1= m2 =100, m = 100-8 = 92 霍斯提信度
= 2m/(m1 + m2)=2(92)/(100+100)=0.92 π o = 0.92, π e = (0.30)2+(0.45)2+(0.25)2=0.355
B 当两个评分者（或编码员）判断同一现象时， 评价结果是否一致？
方法：计算两个评分者评分之间的相关；或计算两个 编码员编码结果一致的比例，用于评价信度
16
3、等价性分析
• 前一种应用A比较少见（构造等价的量表非 常困难）
• 后一种应用B比较常见，也称为 评分者内在信度
(inter-rater reliability)
将上式中对应两个编码员的数据， 改为同一编码员的两次数据
22
例 在一项少儿电视节目内容分析的编码表中，两个编码员 分别同时独立地将100个少儿节目分配到如下三个类别中：1、 单本剧 2、连续剧 3、系列剧。已知编码不一致的节目 共计8个；这三个类别的节目数分别占30%、45%和25%。试 分别利用霍斯提和史考特公式，评价这两个编码员编码的等 价性。
8
2、内在一致性分析 目的：检验多项目量表中各个项目的一致性
可信的量表的项目必须具有内在一致性
9
2、内在一致性分析 方法之一：折半法
(split-half technique)
1、稳定性分析 方法： 用“再测信度”来测量稳定性 再测信度：两次测量结果间的相关系数
相关系数越接近 1，表示稳定性越好
7
1、稳定性分析 缺点： 一般应用中很难真正实现（人力、财力、时间） 再测信度的应用有局限性 • 第一次的测量可能会影响到第二次（信度偏高）
• 两次测量间客观的情况可能有变化（信度偏低）
解： m1= m2 =100, m = 100-8 = 92 霍斯提信度
= 2m/(m1 + m2)=2(92)/(100+100)=0.92 π o = 0.92, π e = (0.30)2+(0.45)2+(0.25)2=0.355
B 当两个评分者（或编码员）判断同一现象时， 评价结果是否一致？
方法：计算两个评分者评分之间的相关；或计算两个 编码员编码结果一致的比例，用于评价信度
16
3、等价性分析
• 前一种应用A比较少见（构造等价的量表非 常困难）
• 后一种应用B比较常见，也称为 评分者内在信度
(inter-rater reliability)
将上式中对应两个编码员的数据， 改为同一编码员的两次数据
22
例 在一项少儿电视节目内容分析的编码表中，两个编码员 分别同时独立地将100个少儿节目分配到如下三个类别中：1、 单本剧 2、连续剧 3、系列剧。已知编码不一致的节目 共计8个；这三个类别的节目数分别占30%、45%和25%。试 分别利用霍斯提和史考特公式，评价这两个编码员编码的等 价性。
8
2、内在一致性分析 目的：检验多项目量表中各个项目的一致性
可信的量表的项目必须具有内在一致性
9
2、内在一致性分析 方法之一：折半法
(split-half technique)
信度与效度分析
在测量理论中效度被定义为在一系列测量中与测量目的有关的真实的变异数即有效变异48效度具有特殊性和相对性即每个测量工具只对某特殊目的有效仅能对其特定项目作正确的度量或者说测量的效度总是针对着要解决的问题来说的亦即针对着打算作出的应用来建立的
关于信度与效度分析
你现在学习的是第1页，课件共65页
根据调查目的设计的调查问卷是一种测量工具 。其质量高低对调查结果的真实性、适用性等具有 决定性的作用。为了保证问卷具有较高的可靠性和 有效性。在形成正式问卷之前，应当对问卷进行试
你现在学习的是第20页，课件共65页
缺点：
如复本编制不容易，易出现顺 序效应，受练习的影响；
复本信度只能反应问卷内容所造 成的误差，无法反应答卷者本身所造成 的误差等。
你现在学习的是第21页，课件共65页
3. 分半信度 (split-half reliability)
分半信度常用在不可能进行重复调查的情 况下。其计算方法是将调查的条目分成两半，计算 这两半测量结果的相关系数r，又称分半信度系数， 以此为标准来衡量整个量表的信度。
你现在学习的是第26页，课件共65页
5. Cronbach’s α信度系数
Cronbach α信度系数是目前最常用的信 度系数，其计算公式为：
K K
1
1
k
2 i
i 1
2 T
其中，K为量表中题项的总数， i2 为第i题得分 的题内方差， T2 为全部题项总得分的方差。
你现在学习的是第27页，课件共65页
为0或1，α系数与KR20值相同，即库德-理 查森信度公式是克隆巴赫的α系数的一个特 例。
你现在学习的是第29页，课件共65页
低信度:α<0.35, 中信度:0.35<α<0.70, 高信度： 0.70<α
关于信度与效度分析
你现在学习的是第1页，课件共65页
根据调查目的设计的调查问卷是一种测量工具 。其质量高低对调查结果的真实性、适用性等具有 决定性的作用。为了保证问卷具有较高的可靠性和 有效性。在形成正式问卷之前，应当对问卷进行试
你现在学习的是第20页，课件共65页
缺点：
如复本编制不容易，易出现顺 序效应，受练习的影响；
复本信度只能反应问卷内容所造 成的误差，无法反应答卷者本身所造成 的误差等。
你现在学习的是第21页，课件共65页
3. 分半信度 (split-half reliability)
分半信度常用在不可能进行重复调查的情 况下。其计算方法是将调查的条目分成两半，计算 这两半测量结果的相关系数r，又称分半信度系数， 以此为标准来衡量整个量表的信度。
你现在学习的是第26页，课件共65页
5. Cronbach’s α信度系数
Cronbach α信度系数是目前最常用的信 度系数，其计算公式为：
K K
1
1
k
2 i
i 1
2 T
其中，K为量表中题项的总数， i2 为第i题得分 的题内方差， T2 为全部题项总得分的方差。
你现在学习的是第27页，课件共65页
为0或1，α系数与KR20值相同，即库德-理 查森信度公式是克隆巴赫的α系数的一个特 例。
你现在学习的是第29页，课件共65页
低信度:α<0.35, 中信度:0.35<α<0.70, 高信度： 0.70<α
信度和效度 ppt课件
关系数，就可以得出所调查问题的信度。
5
（3）折半信度。复本信度，复查信度的共同特点都是必 须进过两次调查才能检验其信度，在调查只实施一次的 情况下，通常采用折半法估计测量的信度。即将调查的 所有问题按性质、难度编好单双数，在单数题目的回答 结果与双数题目的回答结果之间求相关，这一相关系数 就叫做折半信度。这里必须注意的是，由于问卷是按折 半拟出的，因而问卷题目只是原来的一半。由于长度减 少会降低信度，因此，必须根据以下加以校正放大： r系=2数rn。/1比+r如n。，其应中用r是折修半正法后求的得信录度用，人r员n是时折进半行求考得试的的相成关 绩和录取后工作能力的相关系数为0.7，代入上述公式 r=2×0.7/1+0.7=0.82,这里求出的0.82就是根据公式放大 的相关系数。一般说来，社会调查的信度高达0.8以上， 才能认为调查是较为可靠的。
2
一、社会测量的信度 社会测量的信度是指运用相同的测量手段重复测量
同一对象所得结果的前后一致程度。
例如我们用同一份问卷测量一个小团体的凝聚力程 度，如果前后测量几次的结果相同，就可以说明它的信度 高，相反地，如果紧连着几次测出的结果都不同，就说明 它的信度低。这就如同我们用同一台磅秤去称某一物体的 重量，如果称了几次都得到相同的结构，则看可以说这些 台磅秤的信度很高；如果几次测量的结果都不相同，则可 以说它的信度很低，或者说这台磅秤是不可信的。
社会测量的信度和效度
公共事业管理
课件
1
测量的信度与效度
在社会调查中，任何一种精确地、系统地收集资 料的方法，实际上都是一种特定形式的社会测量。而对 于任何一种测量尺度或测量手段来说，必然会涉及到这 样一些基本问题：测量所得的数据或资料是否与人们感 兴趣的特征有关？测量所得的结构是否正是人们所希望 测量的东西？当这种测量的时间、地点、操作者发生改 变时，测量的结果将会受到什么样的影响？所有这些都 涉及到测量的信度和效度问题。
5
（3）折半信度。复本信度，复查信度的共同特点都是必 须进过两次调查才能检验其信度，在调查只实施一次的 情况下，通常采用折半法估计测量的信度。即将调查的 所有问题按性质、难度编好单双数，在单数题目的回答 结果与双数题目的回答结果之间求相关，这一相关系数 就叫做折半信度。这里必须注意的是，由于问卷是按折 半拟出的，因而问卷题目只是原来的一半。由于长度减 少会降低信度，因此，必须根据以下加以校正放大： r系=2数rn。/1比+r如n。，其应中用r是折修半正法后求的得信录度用，人r员n是时折进半行求考得试的的相成关 绩和录取后工作能力的相关系数为0.7，代入上述公式 r=2×0.7/1+0.7=0.82,这里求出的0.82就是根据公式放大 的相关系数。一般说来，社会调查的信度高达0.8以上， 才能认为调查是较为可靠的。
2
一、社会测量的信度 社会测量的信度是指运用相同的测量手段重复测量
同一对象所得结果的前后一致程度。
例如我们用同一份问卷测量一个小团体的凝聚力程 度，如果前后测量几次的结果相同，就可以说明它的信度 高，相反地，如果紧连着几次测出的结果都不同，就说明 它的信度低。这就如同我们用同一台磅秤去称某一物体的 重量，如果称了几次都得到相同的结构，则看可以说这些 台磅秤的信度很高；如果几次测量的结果都不相同，则可 以说它的信度很低，或者说这台磅秤是不可信的。
社会测量的信度和效度
公共事业管理
课件
1
测量的信度与效度
在社会调查中，任何一种精确地、系统地收集资 料的方法，实际上都是一种特定形式的社会测量。而对 于任何一种测量尺度或测量手段来说，必然会涉及到这 样一些基本问题：测量所得的数据或资料是否与人们感 兴趣的特征有关？测量所得的结构是否正是人们所希望 测量的东西？当这种测量的时间、地点、操作者发生改 变时，测量的结果将会受到什么样的影响？所有这些都 涉及到测量的信度和效度问题。
第4讲 测量的信度与效度
每个理论维度下，必须至少有两题以上才能计算信度， 若只有一个题目，则信度值为1。 设一份量表包括n个项目（x1,x2, …,xn), 假设这n个项目
的分数都与真实分数T有关，即每一个项目xi除与T有关外， 也有独立的误差项Ei,即令量表总和为H=x1+x2+…+xn.
n Var( H ) Var( xi ) n i 1 RH n 1 Var( H )
第一步：按Analyze-Scale-Reliability打开主对话框。 第二步：在左侧的源变量框中选择变量进入Items框，作 为分析变量。 第三步：在源变量框的Model选项框中，选择Alpha （α）信度系数。 第四步：在主对话框，单击OK按钮，提交运行。 第五步：判断计算结果是否可以接受。
A B C D E F
计算获得描述性统计量如下表：
描述性统计量
题号 A1 个数 6 最小值 最大值 4 5 平均数 4.833 标准差 0.408 方差 0.167
A2
A3 A4 A5 A6 A7 A8 ∑Si2 总分
6
6 6 6 6 6 6 6
1
1 4 2 4 4 2 24
2
2 5 3 5 5 3 29
01 02 03 04 5 1 2 5 5 1 2 4 5 2 2 5 5 1 2 5 5 1 2 5 4 1 1 5 4.833333 1.166667 1.833333 4.833333 0.408248 0.408248 0.408248 0.408248 0.166667 0.166667 0.166667 0.166667 05 06 07 08 2 5 4 3 3 5 5 2 3 5 5 2 3 5 5 3 3 5 5 2 3 4 4 2 2.833333 4.833333 4.666667 2.333333 0.408248 0.408248 0.516398 0.516398 0.166667 0.166667 0.266667 0.266667 总分 27 27 29 29 28 24 27.33333 1.861899 3.466667
的分数都与真实分数T有关，即每一个项目xi除与T有关外， 也有独立的误差项Ei,即令量表总和为H=x1+x2+…+xn.
n Var( H ) Var( xi ) n i 1 RH n 1 Var( H )
第一步：按Analyze-Scale-Reliability打开主对话框。 第二步：在左侧的源变量框中选择变量进入Items框，作 为分析变量。 第三步：在源变量框的Model选项框中，选择Alpha （α）信度系数。 第四步：在主对话框，单击OK按钮，提交运行。 第五步：判断计算结果是否可以接受。
A B C D E F
计算获得描述性统计量如下表：
描述性统计量
题号 A1 个数 6 最小值 最大值 4 5 平均数 4.833 标准差 0.408 方差 0.167
A2
A3 A4 A5 A6 A7 A8 ∑Si2 总分
6
6 6 6 6 6 6 6
1
1 4 2 4 4 2 24
2
2 5 3 5 5 3 29
01 02 03 04 5 1 2 5 5 1 2 4 5 2 2 5 5 1 2 5 5 1 2 5 4 1 1 5 4.833333 1.166667 1.833333 4.833333 0.408248 0.408248 0.408248 0.408248 0.166667 0.166667 0.166667 0.166667 05 06 07 08 2 5 4 3 3 5 5 2 3 5 5 2 3 5 5 3 3 5 5 2 3 4 4 2 2.833333 4.833333 4.666667 2.333333 0.408248 0.408248 0.516398 0.516398 0.166667 0.166667 0.266667 0.266667 总分 27 27 29 29 28 24 27.33333 1.861899 3.466667
- 1、下载文档前请自行甄别文档内容的完整性，平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益，请联系客服反馈,我们会尽快为您处理(人工客服工作时间：9:00-18:30)。
2018/11/20
2
信度的类型
不同的测量方式导致不同类型的信度
再测信度(test-retest reliability) 复本信度（alternative-form reliability） 内部一致性信度（internal consistency
reliability）
2018/11/20 3
2018/11/20 20
average variance extracted
i 1 p i 1 2 i p i 1
p
2 i
Var ( )
i
2018/11/20
21
信度与效度的关系
信度是效度的必要条件，但不是充分条件。 概括两者的关系： • 信度低，效度不可能高。因为如果测量的 数据不准确，也并不能有效地说明所研究 的对象 • 信度高，效度未必高。例如用尺子量血压 • 效度低，信度很可能高。 • 效度高，信度也必然高。
2018/11/20 16
构念效度
• 构念效度，就是指测验能够测量到理论上的构念或特质的 程度(Anastasi, 1982, p.144)。 分为聚合效度（convergent validity）和辨别效度 （discriminant validity）两类。 聚合效度：如果某一测量工具的测量分值与测量相同构念或 特质的其它测量工具的分值有高的相关度时，则可以说明 聚合效度高； 辨别效度：如果某一测量工具的测量分值与测量不同构念的 其它其它测量工具的分值有低的相关程度时，即辨别效度 高。
2018/11/20 22
谢谢大家！
2018/11/20
23
CFA法
• 聚合效度：AVE超过0.5(Fornell & Larcker 1981), 所有因子载荷均大于0.5(Bagozzi & Yi 1988)。 • 辨别效度：AVE大于所有因子相关系数的 平方0.5(Fornell & Larcker 1981)。双变量 的CFA模型中，固定协方差模型的卡方值 显著地大于自由估计协方差模型的卡方值， 以两倍标准误构筑的协方差的置信区间不 包含1(Anderson 1987)
2018/11/20 4
复本信度
• 复本信度
是以两个测验复本（在内容、型式、题数、难度、指导说明、时间限 制与例题等方面，必须类似或相等 ）来测量同一群体，然后求得应 试者在这两个测验上得分的相关系数。复本信度的高低反映了这两个 测量复本在内容上的等值性程度，亦称等值性系数(coefficient of equivalence) 。 实施方法： 同时实施：测量一致性，获得等值性系数 间隔实施：测量稳定性和一致性，获得稳定与等值系数 (coefficient of stability and equivalence)
9
Cronbach‘s 系数
2018/11/20
10
信度的检验标准
• • • • • • 信度 .30 不可信 .30 信度 .40 初步的研究，勉强可信 .40 信度 .50 稍微可信 .50 信度 .70 可信(最常见的信度范围) .70 信度 .90 很可信(次常见的信度范围) .90 信度 十分可信
2018/11/20 14
内容效度
涵义：
内容效度是指测量工具的内容是否能够代表所欲测量的行为领域，即 量表内容是否具有代表性。 例如：一位教师给学生做一个数学测验，该测验的题目如果涵盖了教 学所欲达成的目标，及教材的重要内容，我们说该测验有内容效度。
测量方法：
尚没有一种数量的测量方法，它的确定主要是采用逻辑的分析方法， 仔细判断每一项目是否符合及涵盖所要测量的研究领域
使用SPSS计算Cronbach's a 系数
2018/11/20 11
效度分析 （validity analysis）
2018/11/20 12
效度的涵义
效度的涵义：
简言之，就是测量结果的有效性。 或某项测量活动能够测量到测量者所希望了解的特性的程度。
效度与测量目的相关，同一种测量工具在某些测量中具有高效度，但在 另一些测量中却效度不高。 例如：一把信度很高的尺子在测量身高时具有很好的效度，但在测 量血压时效度显然不佳。
2018/11/20 17
构念效度的测量方法－MTMM
确定构念效度，首先一个测验的分数不仅要和测量相同构念或特质的 其它测验分数有高的相关，即辐合效度高；而且要和测量不同构念的 其它测验的分数有低的相关，即辨别效度高 方法：多元特质－多重方法矩阵(multitrait-multimethod matrix)
因此有人将效度定义为： 测验能够达到某种目的的程度(Mehens & Lehmann, 1978, p.109)
2018/11/20 13
效度的类型
由于效度是相对于研究目的和研究侧面而言的，具有多层面 的特征，因此效度具有多种类型。主要有：
内容效度(content validity) 效标关联效度(criterion-related validity) 构念效度(construct validity)
Cronbach‘s 系数
2018/11/20
8
Cronbach‘s 系数
• LeeJ．Cronbach，伊利诺伊大学教授，心 理测量学家。1951年将库德-理查德20(适 合与0，1记分的信度计算公式)进一步推广， 提出著名的多重记分项目的信度计算公式， 即著名的一致性系数
2018/11/20
研究方法
信度与效度分析
2018/11/20
1
信度的涵义
• 什么是信度（reliability） 即是指测量工面：测量结果的稳定性和一致性
稳定性高的测量工具则是指一群人在不同时空下接受同样的衡量工具时， 结果的差异很小。 反例：一把尺子在上午和下午测量同一个人的身高，相差5厘米。 一致性高的测量工具是指同一群人接受性质相同，题型相同，目的相同 的不同问卷测量后，在各衡量结果间显示出强烈的正相关。 反例：测量血压的不同工具得出的结果相差很大
使用SPSS计算折半信度
2018/11/20 7
内部一致性信度
涵义：
折半信度高表明内部项目的相关性高，这实际上反映的是测量工具内部 各项目之间的一致性问题，因此衍生出内部一致性信度。 内部一致性信度是指量表内容与题目之间的关系，考察的是量表的各个 题目是否测量了相同的内容或特质。例如：市场导向的测量量表 计算内部一致性信度的常用方法：
2018/11/20 5
复本信度
缺点：
复本测验的编制不易，不但费时，且成本较高 易受练习影响的测量行为，即使采用复本方法，影响只能 减少，但无法完全避免 计算再测信度与复本信度的共同问题是： 需要进行两次测量。受试者的合作、动机、疲劳和厌烦等 都可能影响测验的实施。因此，寻求只根据一次测验结果 就可以估计信度的方法
使用条件： 两个以上的构念以及能够测量这些构念的两种以上的量表
例如，使用人格量表（方法1）和教师评定（方法2）两种测量方法，测 量学生的三种特质：成就性(A)、社会性(B)、独立性(C)
2018/11/20 18
１．相同方法测量相同特质(信度系数)：｛.77, .81, .92,.71, .78, .83｝ ２．相同方法测量不同特质(辨别效度)：｛.40, .31, .29, .37, .18, .25｝ ３．不同方法测量相同特质(聚合效度)：｛.59, .63, .68｝ ４．不同方法测量不同特质(辨别效度)：｛.29, .18, .27, .09, .11, .12｝ • 此例就是最理想的构念效度，就是1, 3所得相关比2, 4所得相关为高 。 2018/11/20 19 案例介绍
2018/11/20
15
效标关联效度
• 效标关联效度是以经验性的方法，研究测验分数与一些外 在效标间的关系，故又可称为经验效度或统计效度 (empirical or statistical validity)，(Thorndike & Hagen, 1977, p.60)。
根据选择效标的时间不同，可分为：同时效度和预测效度 同时效度(concurrent validity) ：是指测验分数与实施测验同一个时间所取得的效 标之间的相关，旨在使用测验分数估计个人在效标方面的目前实际表现。 例如测量学生智力时，将学生当时的成绩作为效标。 预测效度： (predictive validity)是指测验分数与实施测验后一段时间所取得的效 标之间的相关，旨在使用测验分数预测个人在效标方面的未来表现。 例如测量学生智力时，将测量之后一段时间的学生成绩作为效标。
再测信度
• 再测信度
同一个测量工具在不同的时间对同一受试者重复测量两次，两次测量 结果的相关系数即为再测信度。这一指标反映测量工具的稳定性，亦 称为稳定系数(coefficient of stability)
缺点： 受试者具有学习功能，测试结果易受记忆及经验的影响，从而导致假 性高相关 两次测试难时有相同的测试情境 两次测试的间隔时间并没有统一标准，较难把握
2018/11/20 6
折半信度
• 折半信度(split-half reliability)
指使用测量工具先对一组受试者施测，然后把题 目分成两半计分，依两半所得的分数算出相关系 数 。在无副本且不准备重测的情况下，我们就用 折半信度来计算信度系数，类似于复本信度。
计算折半信度的模型有：Spearman-Brown公式, Guttman公式, Rulon公式。