测量工具的信度和效度分析
- 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。
测量工具的信度和效度分析
常用的测量工具主要有调查问卷和量表,它们都是对个人行为和态度的一种测量技术,是测量答卷者对问卷题目主观认识的个体差异的工具,也是研究者用来搜集资料的一种技术。一般情况下,编制一份量表必须做效度和信度评价,而调查问卷则不是必须的。对于有些调查问卷,其包含了类似量表性质对答卷者客观指标测量的题目,对这部分题目需要进行效度和信度的评价。
第一节信度分析概述
一、信度的概念
信度是指测量工具的可靠性和稳定性的程度,或是指使用某测量工具所获得结果的一致程度或准确程度。
测量工具的信度包含2层含义:一是相同的个体在不同时间,以相同的测量工具测验或以复本测验,或在不同的情景下测验,是否能得到相同的结果,即测量工具的测验结果是否随时间和地点等因素而变化;二是能否减少随机误差对测量工具测验结果的影响,从而反映测量工具所要测量的真实情况,即测量工具是否具有稳定性、可靠性和可预测性。
信度的三个特征是:稳定性、内部一致性和等同性。一个好的测量工具必须是稳定可靠,且多次测验结果应前后一致。
信度本质上是一个统计学概念,是用于估计测量误差大小的尺度,主要说明测量工具测验结果中测量误差所占的比例。实际应用中主要通过构建平行测验来计算测量工具的信度。
二、信度的评价方法
信度研究的是测量工具测验结果的可靠性与稳定性,这种可靠性与稳定性可以从4个不同的角度来评价:①在相同条件下所得测量工具测验结果一致程度;②不同研究者用同一种测量工具同时测验所得结果的一致程度;③同一研究者用同一种测量工具在不同时间内测验所得结果的一致程度;④同一答卷者在不同时间内对同一种测量工具测验的稳定程度。
根据研究角度不同,信度分为外在信度(external reliability)与内在信度(internal reliability)两大类。外在信度是指不同时间测量时测量工具测量的一致性程度。内在信度是指测量工具是否测量的是单一概念,同时也
表明测量工具各项目之间的内在一致性程度。
衡量信度高低的统计指标是信度系数(r)来表示,r 〉0.75表明信度水平较高;r= 0.5-0.75表示信度处于中等水平低水平;r〈 0.5表示信度处于较低水平。常见的信度系数有重测信度、复本信度、分半信度和Cronbach's系数等。重测信度是最常用的外在信度,Cronbach's系数是最常用的内在信度。
三、信度的分析方法
1重测信度(test-retest reliability)
1.1定义:用同一工具两次或多次测定同一研究对象,所得结果的一致程度。
1.2指标:重测相关系数(r) r=0-1;r越接近1,重测信度越高
计算公式:r= =
行两次调查,间隔30分钟,发现仅20%的人对所有问题两次回答一致,有5%的人对13个及以上的问题两次回答不一致。
2复本信度(alternative form reliability):也叫等值性系数(coefficient
Of equivalence)。指两个大致相似的研究工具同时被用于研究对象,即题目不同但内容相似的两份测量工具。复本信度越高,测量工具越可靠,越能代表所欲测量的内容。计算方法是用两个复本间隔一定时间或同时施于同一答卷者所得分数的相关系数。
3分析测量工具内部一致性(internal consistency)的信度系数:适用于由多个条目组成的问卷或量表,是护理研究中最常用的信度测量方法。种类包括:折半信度(split-half reliability)、Cronbach's a系数以及适用于计算二分类是非题同质性信度的库德-理查森20号公式(KR20)。
3.1折半系数:将测量工具(量表)的各项目分成两部分,分别加以计分,对这两个部分的数值进行相关分析,然后采用Spearman-Brown公式计算信度。折半方法:奇偶折半法、前后折半法
计算方法:先根据重测信度公式计算出相关系数r,再使用Spearman-Brown公式计算折半信度。
折半系数测定的缺点是:不同的折半方法会导致不同的结果,而Cronbach’a
系数与KR-20值所计算的是工具中所有项目的平均相关程度。
3.2Cronbach’a系数:该系数是Cronbach于1951年创立的,取值范围在0-1之间,a系数越高,信度越高,测量工具内部一致性越好。
计算公式:α=N p/[1+p(N-1)
在SPSS中计算重测信度的步骤:
在任务栏中选Analyze→scale→ reliability→item→alpha
3.3KR-20:是Cronbach’a的一种特殊形式,适用于二分制的测量工具,例如
回答“是”或“否”、“正确”或“错误”的测量工具。
计算公式:α=[k/(k - 1) ]. (δ2-Σpiqi)/δ2
4评分者信度:不同评定者使用相同的工具,同时测量相同的对象时,需计算评定者间一致程度。检验方法:相关系数。
信度系数的计算有多种方法,各种方法所适用的信度类型也不同,因此在计算信度系数时必须认真考虑实际所求信度的类型,然后选择恰当的信度系数公式。由于误差来源不同,即使同一个测量工具用不同方法所计算的信度系数也会不同,所以各信度系数间也不具有可比性。一般在信度分析中,要分别报告不同方法计算出的信度值。各种信度及其误差来源:
重测信度:检验量表的稳定性,考虑的误差来源是时间取样。
分半信度:检验量表的一致性,它考虑的误差来源是内容取样。
内部一致性系数:检验量表的一致性,考虑的是测验内容是否异质。
评分者信度:检验量表的等同性,考虑的误差来源是评分者间的差别。
复本信度:检验量表的等同性,考虑的误差来源是内容取样。
四提高测量工具信度的方法
1适当延长测量工具的长度。测量工具的题目越少,得分越容易受偶然因素的影响,测量工具的信度就越低;反之,测量工具题目越多,扩大了被测量者得分范围,在一定程度上排除了偶然因素的影响,提高了测量工具的信度。但是测量工具长度的增加与测量工具信度的提高并不总成正比,当信度系数较小时,延长测量工具的题目,信度系数增加较大;而当信度系数较大时,延长测量工具的长度对信度系数的影响就较小。
2测量工具难度适中。测量工具题目太难或太易都会使测量工具得分差异减小,从而降低了测量工具的信度。
3测量工具的内容尽可能同质。
4测验时间要充分,测验程序要统一,测量工具的评分要客观。
第二节效度分析概述
1
一、效度的概念
效度的定义:效度通常是指测量工具的有效性和正确性,即所用的测量工具
能够测量出研究者所欲测量特性的程度。效度是测量工具最重要的特征,效度越高表示该测量工具测验的结果所能代表要测验行为的真实度越高,越能够达到测验目的,该测量工具才越正确越有效。对于一个标准测验来说,效度比信度更为重要,效度的大小由效度系数来表示。
效度包括了两方面的含义:其一是测量工具的测验目的;其二是测量工具对测