管理定量分析第2章 概念的操作化及测量

建构效度 • 建构效度分为两种:收敛效度与判别效度。
• 收敛效度是是指相同概念里的项目，彼此之间相关 度高。 • 判别效度是指不同概念里的项目，彼此相关度低。
管理定量分析
第二章：测度》》几种建立效度的方法
• 表面效度：如果管理者将一个指标作为所研究的概念的有效指标来使用，这 一指标被称作具有表面效度。 • 一致效度：如果许多处于不同情况的人将它作为有效指标，这一指标则被称 为具有一致效度。 • 举例来说，“重犯的比率”这一指标是用来测度监狱改造罪犯的能力的好指 标，被认为具有一致效度。
信度指标的分类 • • • • 信度指标多以相关系数表示，大致可分为三类： 1.稳定系数（跨时间的一致性） 2.等值系数（跨形式的一致性） 3.内在一致性系数（跨项的一致性）
信度分析的方法主要有以下四种： • • • • ①重测信度法（稳定系数） ②复本信度法（等值系数） ③折半信度法（内在一致性系数） ④α信度系数法（内在一致性系数）
管理定量分析
第二章：测度》》几种建立效度的方法
• 如何寻找合适的指标： • 1.查阅本领域中出版的文献资料 • 如果一个指标在文献中曾经被应用，它至少具有表面效度和一致效 度，同时也可能符合其他的效度标准。 • 查阅文献还可以知道别的研究人员是如何研究相关问题的以及有何 发现。 • 2.自行研发
管理定量分析
• 前提假设：表达某一现象的概念通常都是不能直接进行测 度的。 • 例：陆军军官的效能、受教育水平、公共汽车司机的驾驶 表现、偷窃活动严重程度，以及项目执行的成功与否，这 些概念都是不能直接进行测度的。 • 这些概念总是通过操作化定义所说明的指标来进行间接测 度。
管理定量分析
第二章：测度》》2.1 测度理论
管理定量分析
第二章：测度》》一个关于测度失误的例子
城市交通系统通过检视事故记录和正点率来评估公交 车司机的工作表现。但是很有可能一个驾驶员保持着良好 的事故记录，并且经常正点运行，但他仍然是一个糟糕的 驾驶员。也许这位司机为了保持正点运行的记录而甩客。 也或许这位司机没有恰当地保养汽车，而使他的汽车总是 停在修理厂里。 • 这个例子说明我们所关心的概念有时候并不一定能够 被指标所完全测度。
管理定量分析
第二章：测度》》2.3 测度的信度
信度指测验结果的一致性、稳定性及可靠性，它是指采用同样的方法对同 一对象重复测量时所得结果的一致性程度。 在观察对象本身并未发生变化时，一个可靠的指标在测度中总是对它们赋予 同样的数值。或者说，不管谁做测度，不管在何处测度，除了所测度概念自身 的变化，其他因素的影响都不能导致应用这一指标所获得测度结果的差异，那 么这一指标就具有信度。 例如，在间隔很短的一段时间里两次测度社区警务工作的绩效，如果得出 同样的结果，所运用的指标就可以被称为是可靠的。
• 接待员的工作绩效 •
效率指标+服务态度指标。
• “三元测度”一词有时被用来描述多个指标是如何附着或圈定于某个概念。 • 当指标不能很好地代表对应的概念时，多重指标就是必要的。
管理定量分析
第二章：测度》》一个多重指标测度例子
• •
“文明小区建设工程”的成功与否的测度： 房价是否上涨 犯罪率的下降 破坏公共设施行为的减少 居民愿意夜晚在户外散步 以及总体精神面貌 居民委员会活动 邻里之间日常生活互助活动的开展等等 每一项指标都能够部分反映“文明小区建设工程”这一概念，但同时也反映 很多其他因素，比如整个城市的经济增长、住房压力、街道照明等。 • 多重指标法背后的理论依据是各个指标的误差可以互相抵消。最后得到的综 合评价要比单一指标更能准确地体现概念。因为这些原因，“多指标策略” 在测度重要概念时受到广泛推祟。
重测信度法（稳定系数）
• 这一方法是用同样的问卷对同一组被调查者间隔一定时间 重复施测，计算两次施测结果的相关系数。 • 重测信度法特别适用于事实式问卷，如性别、出生年月等 在两次施测中不应有任何差异，大多数被调查者的兴趣、 爱好、习惯等在短时间内也不会有十分明显的变化。如果 没有突发事件导致被调查者的态度、意见突变，这种方法 也适用于态度、意见式问卷。 • 由于重测信度法需要对同一样本试测两次，被调查者容易 受到各种事件、活动和他人的影响，而且间隔时间长短也 有一定限制，因此在实施中有一定困难。
管理定量分析
第二章：测度》》几种建立效度的方法
• 注意： • 同时具备表面效度、一致效度、相关效度和预见效度的指标，不一定比其他 测度值有效。 • • 例如：法学院的入学考试的合理性考察： • 这一考试具有表面效度和一致效度(很多法学院都采用LSAT来选拔学生)，它 同时也具有相关效度(它与大学生的成绩有关)和预见效度(它和入学以后的成 绩有关)。然而，如同考生的家庭社会经济地位一样，这一考试也不能正确地 预见学生将来在法学院的学习表现。
•
管理定量分析
第二章：测度》》一个关于测度失误的例子
指标＝概念+误差 好的指标只有很少的误差；不好的指标则与既定的概念之间只存在些微联系。 在许多情况下，一个单独的概念需要采用多个指标来进行测度。应用多重指标的 原因之一就是这一概念可能具有一维以上的含义。
管理定量分析
第二章：测度》》一个多重指标测度例子
管理定量分析
第二章：测度》》2．2 测度的效度
• 效度（Validity）即有效性，它是指测量工具或手段能够准确测出所需测量的 事物的程度。 • 效度是指所测量到的结果反映所想要考察内容的程度，测量结果与要考察的 内容越吻合，则效度越高；反之，则效度越低。如果一个指标只包含很小的 误差，那么它就可被称为相应概念的有效测度指标。
管理定量分析
第二章：测度》》几种建立效度的方法
• 相关效度：如果一个指标与其他已经被确认具备效度的指标存在高度相关性， 则它被认为具有相关效度。 • 例如，民意测验及其评价结果表明，社区对非营利性机构的满意程度与这一 机构所能筹集到的捐款数目或捐赠者人数高度相关。
• 预见效度：如果一个指标能够正确地预报一个具体的结果，就称该指标具有 预见效度。 • 例如，如果公务员岗位测试的分数能准确地反映他们的在岗表现，这一考试 就具备预见效度。
复本信度法（等值系数） • 复本信度法是让同一组被调查者一次填答两份问 卷复本，计算两个复本的相关系数。 • 复本信度法要求两个复本除表述方式不同外，在 内容、格式、难度和对应题项的提问方向等方面 要完全一致，而在实际调查中，很难使调查问卷 达到这种要求，因此采用这种方法者较少。
折半信度法 （内在一致性系数）
第2章 概念的操作化及测量
管理定量分析 长安大学：刘兰剑
•
你幸福吗？
管理定量分析
第二章：测度》》
• 测度：是指对我们研究的对象赋予一定的数值。 • 例： 陆军军官的效能可以通过计算在各种特征上高级军官和初级 军官的比值来测度。 受教育水平可以用学生的标准化考试分数来测度。 城市公交车司机的工作表现可以用其驾驶事故记录和正点运 行率来测度。 非营利性基金会募捐活动的成绩可以用其所筹钱款数目的多 少来测度。
• 操作化定义： • 是一种陈述，告诉分析人员如何把一个不能直接测度的概念转换 成具有可操作性的测度方式。
• 指标： • 是指一个变量或观测值的一个集合，是应用操作化定义得到的结 果。
管理定量分析
第二章：测度》》一些操作化定义的例子
• 1“启动脑筋”项目参加者的教育成绩被定义为他们某基本技能测试中取 得的分数。 • 2 ．公务员绩效被定义为上级官员采用 AJKl47 ／285-Z表格所做出的主观 评估。 • 3．“某监狱改造犯人工程”是否成功被定义为重犯率低于50％。 • 4．“惯犯”的定义是，一个犯人从监狱释放不足一年，又被逮捕并被确 认有罪。 • 5．人力资源部工作的客户满意度是通过客户填写调查问卷并进行分类统 计来实现测度的(满意程度通常有高、中、低三种类型)。 • 6．公平使用环境协会将其“积极志愿者”定义为志愿者平均每周至少将 自己的5个小时时间致力于该协会的工作。
管理定量分析
第二章：测度》》难以精确测度的分析对象
例：如何测度公众的特征和态度？ 案例：国家准备上调个人所得税起征点，在作出决策之前进行 一项民意调查，了解民众对这一问题的看法。如何分析这一问题？ 首先，对人群进行分类：比如：中学生、大学生、在职人员 或者：按收入水平分类：低收入者、中收入者、高收入者。 其次：再对其态度进行分类：支持、不支持、无所谓等 虽然这些现象不能够直接采用数字尺度来进行测量，它们仍然 是重要的分析变量。 管理者应该知道如何从统计上来测度、描述和分析这些变量。
第二章：测度》》案例
• 某研究者从事一项有关危害健康的评估调查，目的是研究患者的背景和生活方 式等因素与健康之间的关联性。 • 他对207名被调查者进行了相关项目的一项问卷调查，三个月后，对同样的调 查对象进行了完全相同的调查。结果发现，只有15%的人在两次问卷调查中提 供了完全相同的资料。 • 其中，10%的人在第二次问卷中填写的身高不同与第一次： 1/3的人填答的双亲年龄不同于第一次，甚至有一个人的父母在三个月内年龄多 了20岁！ 一些受访者在第二次填答问卷时将自己的个人病史（肺气肿、心脏病、糖尿病） 和被逮捕过的记录隐藏了起来。 一位受访者，第一次填写问卷时说母亲已经去世，第二次却说母亲还健在。 一位受访者在第一次调查中说自己的卵巢十分完好，第二次却说卵巢没有了， 而且在10年前就没有了。
检测效度的三种方法： • 内容效度 • 校标关联效度 • 建构效度
内容效度
• 内容效度是指量表涵盖研究主题的程度。判断方法为: • ①测量工具是否可以真正测量到研究者所要测量的变量。 ②测量工具是否涵盖了所要测量的变量。 • 调研人员必须检查量表中的项目能否足够地覆盖测量对象 的主要方面。
效标关联效度 • 效标关联效度是指测量工具的内容具有预测或估 计的能力，并依照其使用间隔的长短又可分为预 测效度和同时效度。 • 预测效度是指测量工具有能够预测未来的能力； 同时效度是指测量工具具有描述目前现象的有效 性。
• • 折半信度法是将调查项目分为两半，计算两半得分的相关系数，进而估计整 个量表的信度。 如果测量某种特征的测验是由许多小题目构成的，那么测验内部的一致性就 很重要。在编制这种测验时可用折半法求其信度，即以一份测验施测于一群 人，将测验的题目随机地分为两半，分别计算分数，用这两组分数求出相关 系数。这种相关系数称为折半信度系数。折半信度是估计测验信度的一种常 用方法。一份经过精心编制的能力测验，其信度系数在0.90以上。 这种方法一般不适用于事实式问卷（如年龄与性别无法相比），常用于态度 、意见式问卷的信度分析。 在问卷调查中，态度测量最常见的形式是5级李克特（Likert）量表。进行折 半信度分析时，如果量表中含有反意题项，应先将反意题项的得分作逆向处 理，以保证各题项得分方向的一致性，然后将全部题项按奇偶或前后分为尽 可能相等的两半，计算二者的相关系数。
管理定量分析
第二章：测度》》一个不注意测试度方法的案例
• 案例： • 某市警方对该市存在的偷窃活动进行的 一次严厉制裁行动。警察局“打丑”分队的 日逮捕人数从3．4增加到4．0。
• 以此数字为依据，警察局长宣称他们完成了 一次成功的社会治安整治活动。
•
管理定量分析
第二章：测度》》2.1 测度理论
• •
α信度系数法（内在一致性） •
•
2 2 其中，K 表示量表中题项的总数， i 为第 i 题得分的题内方差， T 为总题项(总得分)的方差。从
公式中可以看出，α 系数评价的是量表中各题项得分间的一致性，属于内在一致性系数。这种方法 适用于态度、意见式问卷（量表）的信度分析。一般探索性研究，Cronbach α 系数在 0.6 以上
管理定量分析
第二章：测度》》增加信度的方法
• 如何增加信度？
• 信度的两个主要威胁是在测度中存在的主观性和缺少精确性。 • 主观测度是指以测度者或调查问卷回答者的判断为依据的测度。 • 例如：要求分析人员对邻里关系的质量作出一般性评价的测度就是 一个主观测度。 • • • • • 提高信度的方法： 1.培训 2.多人对同一对象进行测度 3.尽量选择客观性指标 例如：街道上有垃圾堆积吗?房屋有涂料脱落的情况吗?狗有没有四 处乱跑?路面有坑坑洼洼吗?有多少坑洼?