测量工具地信度和效度分析报告报告材料
- 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。
测量工具的信度和效度分析
测量工具的信度和效度分析
常用的测量工具主要有调查问卷和量表,它们都是对个人行为和态度的一种测量技术,是测量答卷者对问卷题目主观认识的个体差异的工具,也是研究者用来搜集资料的一种技术。一般情况下,编制一份量表必须做效度和信度评价,而调查问卷则不是必须的。对于有些调查问卷,其包含了类似量表性质对答卷者客观指标测量的题目,对这部分题目需要进行效度和信度的评价。
第一节信度分析概述
一、信度的概念
信度是指测量工具的可靠性和稳定性的程度,或是指使用某测量工具所获得结果的一致程度或准确程度。
测量工具的信度包含2层含义:一是相同的个体在不同时间,以相同的测量工具测验或以复本测验,或在不同的情景下测验,是否能得到相同的结果,即测量工具的测验结果是否随时间和地点等因素而变化;二是能否减少随机误差对测量工具测验结果的影响,从而反映测量工具所要测量的真实情况,即测量工具是否具有稳定性、可靠性和可预测性。
信度的三个特征是:稳定性、内部一致性和等同性。一个好的测量工具必须是稳定可靠,且多次测验结果应前后一致。
信度本质上是一个统计学概念,是用于估计测量误差大小的尺度,主要说明测量工具测验结果中测量误差所占的比例。实际应用中主要通过构建平行测验来计算测量工具的信度。
二、信度的评价方法
信度研究的是测量工具测验结果的可靠性与稳定性,这种可靠性与稳定性可以从4个不同的角度来评价:①在相同条件下所得测量工具测验结果一致程度;②不同研究者用同一种测量工具同时测验所得结果的一致程度;③同一研究者用同一种测量工具在不同时间内测验所得结果的一致程度;④同一答卷者在不同时间内对同一种测量工具测验的稳定程度。
根据研究角度不同,信度分为外在信度(external reliability )与内在信度(internal reliability )两大类。外在信度是指不同时间测量时测量工具测量的
一致性程度。内在信度是指测量工具是否测量的是单一概念,同时也表明测量工具各项目之间的内在一致性程度。
衡量信度高低的统计指标是信度系数(r)来表示,r〉0.75表明信度水平较高;r= 0.5-0.75表示信度处于中等水平低水平;r < 0.5表示信度处于较低水平。常见的信度系数有重测信度、复本信度、分半信度和Cron bach's系数等。重测信度是最常用的外在信度,Cron bach's系数是最常用的内在信度。
三、信度的分析方法
1 重测信度(test-retest reliability )
1.1定义:用同一工具两次或多次测定同一研究对象,所得结果的一致程度。
1.2指标:重测相关系数(r)r= 0 -1 ;r越接近1,重测信度越高
计算公式:r= * m_丫-产
D:第一次测试研究对象各得分之和
E Y:第二次测试研究对象各得分之和
IX2:第一次测试研究对象各得分平方之和
E Y2:第二次测试研究对象各得分平方之和
1.3在SPSS中计算重测信度的步骤:
在任务栏中选An alyze —correlate bivaviate —varables —pears on
1.4使用重测信度需考虑的问题
①两次测量间隔时间
②研究工具所测量的变量性质:适用较稳定的变量:人格特征、能力、生活质量、某些生理指标。
③测量环境的一致,包括:物理环境、时间、测量程序与测试者等
④样本量:预计样本的10% (10-20例
1.5重测信度结果的影响原因:变量随时间推移而发生改变;第一次测量结果的记忆效应;被调查者对第二次测评的不认真;条目设置问题;答案的评分等级问
题
研究表明:采用同一份由204个问题组成的自填式医学问卷,对2352名病人进行两次调查,间隔30分钟,发现仅20 %的人对所有问题两次回答一致,有5% 的人对13个及以上的问题两次回答不一致。
2 复本信度 (alternative form reliability ):也叫等值性系数(coefficient
Of equivale nee)。指两个大致相似的研究工具同时被用于研究对象,即题目不同但内容相似的两份测量工具。复本信度越高,测量工具越可靠,越能代表所欲测量的内容。计算方法是用两个复本间隔一定时间或同时施于同一答卷者所得分数的相关系数。
3分析测量工具内部一致性(internal consistency)的信度系数:适用于由多个条目组成的问卷或量表,是护理研究中最常用的信度测量方法。种类包括:折半信度(split-half reliability )、Cron bach's a系数以及适用于计算二分类是非题同质性信度的库德-理查森20号公式(KR20 )。
3.1折半系数:将测量工具(量表)的各项目分成两部分,分别加以计分,对这两个部分的数值进行相关分析,然后采用Spearma n-Brow n 公式计算信度。折半方法:
奇偶折半法、前后折半法
计算方法:先根据重测信度公式计算出相关系数r,再使用Spearman-Brown
公式计算折半信度。
折半系数测定的缺点是:不同的折半方法会导致不同的结果,而Cron bach ' a 系数与KR-20值所计算的是工具中所有项目的平均相关程度。
3.2 Cron bach ' a系数:该系数是Cron bach于1951年创立的,取值范围在
0-1之间,a系数越高,信度越高,测量工具内部一致性越好。
计算公式:a =Np/[1 + p(N-1)
在SPSS中计算重测信度的步骤:
在任务栏中选Analyze —scale —reliability —item —alpha
3.3 KR-20 :是Cron bach ' a的一种特殊形式,适用于二分制的测量工具,例
如回答“是”或“否”、“正确”或“错误”的测量工具。
计算公式:a = [ k/(k - 1) ]. ( §2 - Ipiqi)/ §2
4评分者信度:不同评定者使用相同的工具,同时测量相同的对象时,需计算
评定者间一致程度。检验方法:相关系数。
信度系数的计算有多种方法,各种方法所适用的信度类型也不同,因此在计算信度系数时必须认真考虑实际所求信度的类型,然后选择恰当的信度系数公式。由于误差来源不同,即使同一个测量工具用不同方法所计算的信度系数也会不同,
所以各信度系数间也不具有可比性。一般在信度分析中,要分别报告不同方法计算出的信度值。各种信度及其误差来源:
重测信度:检验量表的稳定性,考虑的误差来源是时间取样。
分半信度:检验量表的一致性,它考虑的误差来源是内容取样。