项目的区分度分析
第4章 项目分析
所谓真分数是指被测者在所测特质(如能力、知识、个性等)上的真实 值。
我们通过一定测量工具(如测验量表和测量仪器)进行测量,在测量工 具上直接获得的值(读数),叫观测值或观察分数。
8
4.2 项目分析----经典测量理论模型
由于有测量误差存在,所以,观察值并不等于所测特质的真实质,换句 话说,观察分数中包含有真分数和误差分数。
22
4.2.2 难度分布及其控制 (三) 难度分布的控制
(1)对题目难度的控制
主要从考核的知识点及其能力层次等方面进行控制。 考核单一知识点的题目相对考核较多同类知识点的题目要容易。 考核能力层次相对要低(如识记和记忆)的题目,其难度相对低,而 对于考核能力层次高(如理解、综合应用)的题目,其难度相对会高。
9
4.2 项目分析----经典测量理论
4.2.1 难度计算方法
常模参照测验
(一)二分法记分项目的难度
1、得分率法/通过率法 得分率指所有被试在题目上的平均得分占题目满分的百分比。
10
4.2 项目分析----经典测量理论
4.2.1 难度计算方法 常模参照测验 (一)二分法记分项目的难度
2、极端分组法
(4)语言准确规范。
(5)借助选项分析提供的信息对不良选项进行修改,以提高题目区分能力。
35
4.3 项目分析的特殊问题
下列哪一个最有可能是单纯型精神分裂症患者的症状: A 幻听 B 瘫痪 C 记忆丧失 D 厌食
36
4.3 项目分析的特殊问题
一、客观题中的猜测问题与猜测率
猜测误差: (1)猜相对于不猜引起的误差 (2)是否猜的对引起的误差
信度效度难度区分度分析
信度效度难度区分度分析在教育测量和评估领域,信度、效度、难度和区分度是四个非常重要的概念。
它们对于衡量测试的质量、评估学生的学习成果以及改进教学方法都具有至关重要的意义。
接下来,让我们逐一深入探讨这四个概念。
信度,简单来说,就是指测试结果的稳定性和可靠性。
如果我们对同一批学生在相同的条件下进行多次相同的测试,得到的结果应该是相近的。
就好比用同一把尺子去测量一个物体的长度,每次测量的结果都应该差不多。
信度主要包括重测信度、复本信度和内部一致性信度等。
重测信度是在不同时间对同一批被试进行重复测量。
比如,今天对一群学生进行了一次数学测验,一周后再用相同的测验对他们进行测试,如果两次测试的成绩相近,说明这个测验的重测信度较好。
然而,重测可能会受到记忆、练习等因素的影响。
复本信度则是使用两个平行的测验(即内容、形式、难度等方面都相似)对同一批被试进行测量。
如果两个测验的结果一致性高,就表明复本信度良好。
但要编制两个高质量的平行测验并非易事。
内部一致性信度通常通过计算测验内部各个项目之间的相关程度来衡量。
例如,一份试卷中的各个题目,如果它们在测量同一个知识点或能力方面表现出较高的一致性,那么这份试卷的内部一致性信度就比较高。
常用的计算方法有克朗巴赫α系数等。
效度是指测试能够准确测量出所要测量的东西的程度。
好比射箭要射中靶心,测验也要准确测量到我们期望测量的内容。
效度主要包括内容效度、结构效度和效标关联效度。
内容效度关注的是测验内容是否涵盖了所要考查的知识和技能范围。
比如,一场语文考试如果能够全面考查学生的字词、语法、阅读理解和写作能力,那么它在内容效度方面就表现较好。
为了确保内容效度,出题者需要对教学大纲和课程目标有清晰的理解。
结构效度考察的是测验是否能够反映出所假设的理论结构或心理特质。
比如,一个智力测验是否真正测量了智力的各个方面,而不仅仅是某些表面的表现。
这需要通过复杂的统计分析和理论研究来验证。
效标关联效度则是将测验结果与一个外在的标准进行比较。
项目难度与区分度的影响因素与测量方法
项目难度与区分度的影响因素与测量方法概述在项目管理中,项目难度和区分度是决定项目成功与否的重要因素。
本文将探讨项目难度和区分度的影响因素以及测量方法,以帮助项目经理更好地评估项目的复杂性和挑战性,从而制定合理的计划和策略。
影响因素1. 项目规模:项目规模是衡量项目难度和区分度的重要指标。
规模越大,涉及的功能点、团队规模、资源投入等都会增加,难度和区分度也会相应提高。
2. 技术复杂性:技术复杂性是指项目中所涉及的技术难题和解决方案的复杂程度。
如果项目需要采用前沿技术或者解决技术壁垒,那么难度和区分度就会提高。
3. 资源限制:项目中可能存在资源受限的情况,例如时间、人力、预算等。
资源限制会增加项目难度,同时也会影响项目的区分度。
4. 环境不确定性:项目所处的外部环境不确定性也会影响项目的难度和区分度。
例如,市场需求、竞争状况、法律法规等因素的变化都会对项目的进行带来影响。
测量方法1. 项目难度评估矩阵:项目难度评估矩阵是一种常用的评估方法。
通过综合考虑项目规模、技术复杂性、资源限制和环境不确定性等因素,对项目的难度进行评估和量化。
评估结果可以作为项目决策和资源分配的依据。
2. 专家访谈:专家访谈是收集项目难度和区分度信息的有效方法。
通过与相关领域的专家进行访谈,获取他们的意见和建议,以了解项目的难度和区分度。
3. 经验总结和案例分析:对过往的项目经验进行总结和分析,可以得出一些关于项目难度和区分度的规律和经验。
通过借鉴和参考这些经验,可以更好地评估当前项目的复杂性和挑战性。
4. 可行性研究报告:在项目启动前,进行详细的可行性研究,包括市场分析、技术评估、竞争情况等。
可行性研究报告可以提供对项目难度和区分度的详细分析,为项目管理提供重要参考。
结论项目难度和区分度是影响项目成功的重要因素,项目经理需要充分了解和评估项目的复杂性和挑战性,以制定合理的计划和策略。
影响项目难度和区分度的因素包括项目规模、技术复杂性、资源限制和环境不确定性等。
教育测量与评价的难度与区分度
况如下表。计算该选择题的区分度。
生 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20
总 86 52 94 72 65 22 76 83 80 75 76 73 62 91 47 74 81 88 62 58 题1 0 0 1 1 0 0 1 1 1 1 0 1 1 0 1 1 0 0 0
6
5
30
4
2
8
4
10
40
教育测量与评价中题目(项目)的区分度
三、区分度计算方法
相关法 考虑中间数据 以项目分数与效标分数的相关作为项目区分度的指标 (效标分数不易得到时,以测验总分代替) 相关越高,区分能力越好 具体方法:
▪ 积差相关法 ▪ 点二列相关 ▪ 二列相关 ▪ Φ相关
积差相关法计算区分度
主观性试题区分度的计算公式: D X H X L
▪ 说明:
N(H L)
▪ XH:高分组所得总分;XL:低分组所得总分;H:该题最高分;L:该 题最低分;N:考生人数(总人数的25%)
▪ 步骤:
▪ 按测验总分由高到低排序;分别确定测验总分的25%、25%作为高低分 组;列出试题分析表;将数据带入以上公式加以计算
个标准差的位置,由0.84-0.50=0.34去查Z值,Z=-1σ 若一个项目的难度位0.16,则这个项目的难度在平均数以上
一个标准差的位置,由0.50-0.16=0.34去查Z值,Z=σ 若某个项目有50%的学生通过,这个项目的难度落在下图0
的位置上
0.13% 2.14% 13.59% 34.13% 34.13% 13.59% 2.14% 0.13%
分等级、位 1 2 3 4 次、排列顺
项目的区分度分析
项目的区分度分析 Prepared on 24 November 2020第三章第二节项目的区分度分析第二节项目的区分度分析一、项目区分度的意义项目区分度(Item Discrimination),又称项目的鉴别力,指项目得分对被试心理特质水平的区分能力或称鉴别能力。
区分度高的项目能将不同水平的被试区分开来,区分度低的项目不能将不同水平的被试区分开来,不同水平的被试的得分差不多。
二、项目区分度的计算(一)项目鉴别指数法这是项目区分度分析的一种简便方法,比较测验总分高分组和低分组在某一项目上的通过率的差异,作为项目鉴别指数。
计算公式为:D= P H-P L(公式3-5)其中,D为鉴别指数,P H为高分组在该项目上的通过率,P L为低分组在该项目上的通过率。
D值越大,项目的区分度越大,反正也然。
例6,某高中物理测验,被试共18人,高分组和低分组各取总人数的27%,则两组各为5人,第五题高分组5人全部答对,低分组只有1人答对,计算该题的鉴别指数。
(1-=)(二)相关分析法我们一般以总分(或效标分数)来衡量被试能力或成就的高低,被试总分高,在某个项目上的得分也高,说明该项目于总分具有一致性,从这个项目上就可以鉴别出被试水平的高低,那么这个项目的鉴别力就高;反之也然。
也就是说,项目与总分的相关高,项目的鉴别力就高。
所以,我们可以用项目的得分与总分的相关来衡量项目的区分度或称鉴别力。
1.点二列相关(Point biserial correlation)适用资料:两列变量中,有一列为等距或等比的数据而且其总体分布为正态,另一列变量只是名义上的变量,按事物的性质划分为两类,如性别分为男、女,选择答案的是、否;有时一个变量是双峰分布也可以划分为二分名义变量。
如,文盲与非文盲。
就识字量来说可能是一个双峰分布。
计算点二列相关的公式是:r pb = [(Xp-Xq)/St]* (pq)1/2(公式3-6)rpb:点二列相关系数;Xp:答对该题的被试在总分上(或效标分数上)的平均得分;Xq答错该题的被试在总分上(或效标分数上)的平均得分;S t全体被试的总分(或效标分数的标准差);p为答对该题的人数百分比;q答错该题的人数百分比,q=1-p。
项目难度与区分度的关系
项目难度与区分度的关系随着时代的发展和科技的进步,越来越多的项目涌现出来。
在面对众多项目选择时,人们常常会关注项目的难度和区分度。
那么,项目的难度和区分度之间是否存在某种关系呢?本文将就这一问题展开探讨。
从理论上来说,项目的难度和区分度是相互独立的。
难度高的项目未必具有高区分度,而难度低的项目也可能具有较高的区分度。
然而,在实际情况中,我们往往可以观察到一定程度上的相关性。
这是因为在大多数情况下,项目的难度和区分度是相互影响的。
难度高的项目往往具有较高的区分度。
这是因为难度高的项目往往需要较高的技能和经验,对于许多人来说是具有挑战性的。
这种挑战性使得项目在市场上相对较少,从而增加了项目的独特性和区分度。
例如,在科技行业中,开发一款复杂的软件或者设计一种创新的产品都需要高超的技术能力和专业知识,这样的项目往往能够脱颖而出,成为市场上的独特之作。
区分度高的项目往往具有较高的难度。
这是因为区分度高的项目通常需要具备特定的技能和知识,而这些技能和知识往往不是每个人都具备的。
例如,在艺术领域中,创作一幅独特的画作或者演绎一首别具一格的音乐作品,需要艺术家具备高超的创作能力和独特的艺术眼光。
这些项目的难度往往较高,因为要想在艺术领域有所突破,需要不断地进行创新和实践。
项目的难度和区分度也可以相互影响。
难度高的项目往往具有较高的区分度,这是因为在市场上,难度高的项目往往较少,能够吸引更多人的关注。
而区分度高的项目往往具有较高的难度,这是因为要想在市场上独树一帜,需要具备独特的能力和创新的思维。
项目的难度和区分度之间存在一定的关系。
尽管理论上来说,难度和区分度是相互独立的,但在实际情况中,我们往往可以观察到一定程度上的相关性。
难度高的项目往往具有较高的区分度,而区分度高的项目往往具有较高的难度。
因此,在选择项目时,我们可以考虑项目的难度和区分度,找到适合自己的项目,迎接挑战,实现个人的目标与梦想。
第五章__测验的项目分析之区分度
• 例:下表有20个学生语文测验总分以及在作文
题通过,试计算作文题的区分度。
学 生 总 分 作 文 题 得 分 选 择 题 得 分
1 86 47
2 52 37
3 94 55
4 72 27
5 65 22
6 22 10
7 76 35
8 83 42
• 2.二列相关(biserial correlation) • 两个变量都是正态连续变量,其中一个变量被
人为地分成两类。测验总分或效标分数、某个 测验项目的分数都是连续变量,其中一个变量 被人为地分成两类,可以是测验总分或效标分 数被人为地分成两类,也可以是某个项目的分 数被人为地分成两类。 • 点二列相关和二列相关的区分是,二分的变量 总体是否为正态,正态则用二列相关,非正态 则用点二列相关。
• 一、区分度的意义
• 项目区分度(item
discrimination)是
指测验项目对于所测量的心理属性的 鉴别能力和区分程度,也称鉴别力。
• 项目的区分度是测验是否有效的“指示
器”。
• 具有良好区分度的项目,能将不同水平的被试区分
开来,也就是说,在该项目上水平高的被试得高分, 水平低的被试得低分。反之,区分度低的项目则对 不同水平被试不能很好地鉴别,水平高与水平低的 被试,所得分数差不多,甚至正好相反。所以测量 专家们把试题的区分度称为测验是否具有效度的 “指示器”,并作为评价项目质量,筛选项目的主 要指标与依据。必须指出:评价测验项目区分度高 低倚赖于对被试水平的准确测量,通常称作为内部 效标
• 计算二列相关的公式是: • rb X p X q pq
St y
(公式3-7)
•
– rb:二列相关系数; – :答对该题的被试在总分上(或效标分数上)的平均 X p 得分; Xq – :答错该题的被试在总分上(或效标分数上)的平均 得分; – St全体被试的总分(或效标分数的标准差); – p为答对该题的人数百分比;q答错该题的人数百分比, q=1-p; – y为正态分布下答对百分比所在位置的曲线高度。
第十章项目分析第一节项目的难度第二节项目的区分度
二、计算方法
1.二分法计分的项目
用运公式5-31
如果人数较多,运
2.非二分法计分的项目
运用公式5-34(也即得分率)
项目难度受机遇的影响,须运用吉尔福特难
度校正公式即公式5-33进行校正。
一个五择一的测题难度为0.50,一个四择一的
伊贝尔的经验标准。
2.相关法
以某一项目分数与测验的总分做相关
积差相关 点二列相关 二列相关
Φ相关
三、区分度与难度的关系
中等难度的项目区分度最高。 一个测验中,项目难度的分布以常态分布
为好。特别难和特别容易的题目少些,接 近中等难度的项目多些,所有项目的平均 难度为0.50。
第十章内容到此结束
第十章
第一节 第二节
项目分析
项目的难度 项目的区分度
第一节
项目的难度
一、难度的定义 二、难度的计算方法 三、难度水平的确定
一、难度的定义
难度是指项目的难易程度。
难度的指标通常以通过率表示:
P=R/N×100%
P为通过人数占总人数的百分比,称为“通过率”
P值的大小与难度高低成反比。
P值属于[0 1]。
谢 谢!
测题难度为0.53,哪一题的难度更大?
三、难度水平的确定
1.项目的难度
项目的难度越接近0.5,区分力越好。 项目平均难度为0.5(0.5±0.2之间)。 对于选拔性测验和选择题,难度值应视具体
情况分别对待!
2.测验的难度
通过观察测验分数的分布来对测验的难
度作出直观检验。
一般以常态分布为标准,但并非全部!
第二节
项目的区分度
一、区分度的定义 二、区分度的计算方法 三、区分度与难度的关系
17 项目分析-区分度
back
2. 相关法
以项目分数与效标分数或测验总分的相关作为 项目区分度的指标。
back
3. 测验结构分析
因素分析,删除或修改因子负荷低的项目。 因子ቤተ መጻሕፍቲ ባይዱ荷在0.4及以上,表示区分度达标。
back
鉴别指数(D) 0.40 以上 0.30~0.39 0.20~0.29 0.19 以下 很好 良好,修改后会更佳 尚可,但需修改 差,必须淘汰 项目评价
• 区分度与难度有密切关系
D 的最大值与项目难度的关系
项目通过率(P) 1.00 0.90 0.70 0.60 0.50 0.40 0.30 0.10 0.00 D 的最大值 0.00 0.20 0.60 0.80 1.00 0.80 0.60 0.20 0.00
项目分析
二、项目区分度
1.区分度的定义 2.区分度的估计方法
1. 区分度的定义
• 项目区分度(item discrimination)是指测验项目对于所测 量的心理属性的鉴别能力和区分程度,也称鉴别力。
back
2. 区分度的估计方法
1) 鉴别指数法 2) 相关法 3) 测验结构分析
back
1)鉴别指数法
比较测验总分高和总分低的两组被试在项目通过率上 的差别
D Ph PL
• 例如:某高中物理测验,高分组在第5题上的通过率为 0.75,低分组的通过率为0.35,则该项目的鉴别指数为: • D=0.75-0.35=0.40
• 续上 • 1965年,美国测验专家伊贝尔(L. Ebel)根据长期的经验提 出用鉴别指数评价项目性能的标准,如下表所示。
项目分析中的难度分析与区分度
back
1、步骤
1)选取有代表性的样本370人,按规定的程序,进 行预测工作;
2)把370份试卷按测验总分的高低次序排列,然后 从最高分数的人开始向下取足27%(100人)为 高分组,再从最低分数的人开始向上取足27% (100人)为低分组;
1、鉴别指数法 2、方差法 3、相关法
基本概念 : 难度 通过率 区分度 项目鉴别指数 练习与思考 : 1、测验项目分析的作用是什么? 2、设受测者在某题上的通过率为10%,试求 该题的常态化等距难度 指标Δ。
3、对于一个5中选1的选择题,120人中有80 人通过了,试求该题的难度(通过率),并作 矫正。 4、设一次数学测验题目的区分度以统计学成绩 为效标。统计学成绩满分为100分,数学测验 第12题以1、0计分。试求数学测验第12题的 区分度。在数学测验第12题上的1分者、得0分 者的统计学成绩如下:
转换好的Z值在平均数以下是负数。为了 避免负号出现的情况,使用Δ 。
例
在正态分布中,平均数之上或之下一个标准差 的距离约占全体人数的34%
如果在一个测验中某项目A通过率为84% (0.84),那么这项目的难度
-1σ
如果某项目B的通过率只有16%,则这个项目 的难度为
+1σ
若某题C恰好有50%的人通过,则此题的难度 为
分
作 47 37 55 27 22 10 35 42 46 39 40 41 38 52 21 39 42 48 29 27
文 题 得 分
选1 0 0 1 1 0 0 1 1 1 1 0 1 1 0 1 1 0 0 0
择 题 得 分
解:
Xp (86 52 94 83 80 75 76 73 62 91 74 81 88) 13 78.08
4.4.132项目分析区分度
• 取值范围介于[-1.00, 1.00]
• D为正值,积极区分 • D为负值,消极区分 • D为0,无区分作用
一、鉴别指数
• 项目鉴别指数 D=PH -PL • 步骤
• 根据测验总分将被试分为高分组和低分组 • 计算高分组和低分组的通过率 • 高分组通过率减去低分组通过率
一、鉴别指数
• 划分高低分组的注意事项
• 27%的高分端被试组成高分组,另外27%的低分端被试组成低分组 • 一般情况下,其比率介于25%~33%即可; • 当样本团体人数过少时(N<100),则不宜用27%的规则,而可以用50%的规则作为分界
点
二、相关法
• 以项目分数与效标分数或测验总分的相关作为项目区分度的指标
1.00
0.00
0.90
0.20
0.70
0.60
0.60
0.80
0.50
1.00
0.40
0.80
0.30
0.60
0.10
0.20
You
一、鉴别指数
• 鉴别指数与测题的评价
_________________________
D
测题评价
--------------------------------------------
0.40以上
非常优良
0.30-0.39
良好,如能修改更好
0.20-0.29
尚可,但必须修改
0.20以下
劣,淘汰
----------------------------------------------
三、因素分析法
• 分析测题在一个因素上的负荷,负荷越大说明越有区分 度,一般在0.30以上才是可以接受的.
某项目的鉴别指数d为0.15,该项目的区分度()
某项目的鉴别指数d为0.15,该项目的区分度()鉴别指数d为0.15,该项目的区分度()在教育评估和测量中,鉴别指数和区分度是两个重要的概念,它们用来评估测验或考试题目的质量和效果。
鉴别指数(d)是一个统计指标,用来衡量一个测验题目在区分不同能力水平的学生上的效果。
而区分度则是测验题目的一个属性,它描述了一个题目在总体中表现得有多好。
本文将深入探讨鉴别指数为0.15的项目的区分度。
一、鉴别指数的解释鉴别指数(d)是通过考察高分组和低分组中,对某一题目的做题情况,然后对两个组的做题情况进行比较而得出的。
鉴别指数的取值范围是-1到1。
当鉴别指数为1时,表示该题目能够很好地区分高能力者和低能力者。
当鉴别指数为0时,表示该题目对高能力者和低能力者没有区分度。
而当鉴别指数为负值时,表示低能力者做得比高能力者好。
鉴别指数越接近1,说明题目越能够区分学生的能力水平。
二、区分度的含义区分度描述了一个题目在总体测验中的表现情况。
区分度是通过计算学生总体得分和单个题目得分的相关性而得出的。
区分度的取值范围是-1到1。
当区分度为1时,表示这个题目能够非常好地区分高分学生和低分学生。
当区分度为0时,表示这个题目在总体中的表现并不理想。
而当区分度为负值时,表示高分学生做得比低分学生差。
区分度越接近1,说明题目在总体中的表现越好。
三、鉴别指数为0.15的项目的区分度分析在给定鉴别指数为0.15的情况下,我们可以对该项目的区分度进行评估。
根据鉴别指数的定义,当项目的鉴别指数为0.15时,说明该项目对不同能力学生的区分度处于中等水平。
这意味着该项目在某种程度上可以区分学生的能力水平,但效果并不是很明显。
在撰写这篇有关鉴别指数为0.15的项目的区分度的文章中,我们需要着重分析项目的具体内容和形式,探究其中的问题所在。
四、对鉴别指数为0.15的项目的区分度进行总结和回顾在本文中,我们深入探讨了鉴别指数为0.15的项目的区分度。
通过对鉴别指数和区分度的解释和分析,我们对该项目的区分度有了更清晰的了解。
项目优势比与项目区分度的计算方法与解释
项目优势比与项目区分度的计算方法与解释项目优势比和项目区分度是在项目评估和比较中常用的指标,用于衡量项目的综合能力和特点。
本文将介绍项目优势比与项目区分度的计算方法,并对其进行详细解释。
我们来了解一下项目优势比。
项目优势比是指一个项目相对于其他项目的竞争优势程度。
它可以帮助我们确定该项目在行业或市场中的地位和竞争优势。
计算项目优势比的方法是将该项目在某个指标上的得分除以其他项目的得分平均值,并乘以一个常数。
这个常数可以根据需求和具体情况来设定,常用的取值为2或3。
这样计算出的数值越大,代表该项目在该指标上具有更大的优势。
例如,我们有三个项目A、B和C,它们在销售额这个指标上的得分分别为100、80和60。
如果我们取项目优势比的常数为2,那么项目A的优势比为(100/(80+60)/2)=1.43,项目B的优势比为(80/(100+60)/2)=0.89,项目C的优势比为(60/(100+80)/2)=0.53。
可以看出,项目A在销售额指标上相对于其他项目有较大的竞争优势。
接下来,我们来了解一下项目区分度。
项目区分度是指一个项目在多个指标上与其他项目的差异程度。
它可以帮助我们评估该项目在不同方面的表现和特点。
计算项目区分度的方法是对各个指标的得分进行标准化处理,然后计算出该项目各个指标得分的方差。
方差越大,代表该项目在各个指标上表现的差异越大。
例如,我们有三个项目A、B和C,它们在销售额和市场份额这两个指标上的得分分别为100、80和60,和60、50和40。
首先对各指标得分进行标准化处理,然后计算出方差。
假设标准化处理后的得分为a、b、c和x、y、z,那么项目A的得分方差为(var(a,x)+var(a,y)+var(a,z))/3,项目B的得分方差为(var(b,x)+var(b,y)+var(b,z))/3,项目C的得分方差为(var(c,x)+var(c,y)+var(c,z))/3。
可以通过计算得出各个项目的得分方差,从而评估它们在销售额和市场份额指标上的差异。
试述项目区分度的含义及其计算方法
试述项目区分度的含义及其计算方法
1. 引言
在进行计划改进或研究时,我们需要评估测量工具的有效性。
其
中之一就是项目区分度。
它是一个用于评估测量工具是否能够准确地
区分受测者在被测量项目方面的表现的指标。
本文将介绍项目区分度
的含义及其计算方法。
2. 项目区分度的含义
简言之,项目区分度是指评估测量评估工具中各项目对受试者进
行评估的能力区分度。
具体来说,它是指测量工具中各个项目与总分
之间的相关性。
一个好的测量评估工具应该具有高的区分度,这意味着它能够准
确地区分出受测者在被测项目中的表现。
如果一个测量评估工具的区
分度很低,它就不能准确地评估受测者的表现。
3. 项目区分度的计算方法
我们可以使用以下公式来计算项目区分度:
D= (最高分-最低分)/(总分-最低分)
其中,D为项目区分度;最高分为受试者在某个项目中的最高得分;最低分为受试者在某个项目中的最低得分;总分为测量评估工具所包
含项目的总分。
该公式的结果范围为0-1之间,越接近1,表明该项目越能准确地区分出受测者在被测项目中的表现。
4. 结论
项目区分度是评估一个测量评估工具的重要指标之一。
它所衡量的是测量工具中各项目对受测者进行评估的能力区分度,其计算公式是(最高分-最低分)/(总分-最低分)。
一个好的测量评估工具应该具有高的区分度,以保证其能够准确地评估受测者的表现。
区分度名词解释
区分度名词解释
区分度是测试或测验项目的一个重要指标,用来评定测试题目对被试者能力的识别度。
简单地说,区分度反映了一个问题在回答正确的人群与回答错误的人群之间的差异程度。
区分度可以用统计学方法来衡量,最常见的方法是使用皮尔逊积矩相关系数(P-value)。
P-value的取值范围为-1到1,数
值越接近1表示区分度越高,数值越接近-1表示区分度越低。
通常,一个区分度大于0.3或0.4的问题被认为是具有较好的
区分度,而小于0.2的问题则被认为是具有较低的区分度。
区分度可以从不同的角度来理解和解释。
首先,区分度反映了测试题目的难度水平。
当一个问题的难度适中时,被试者能力较高的人更容易回答正确,能力较低的人更容易回答错误,从而产生较高的区分度。
如果问题过于简单或过于困难,被试者的回答可能没有明显的差异,从而导致较低的区分度。
其次,区分度也反映了问题的有效性。
一个能够很好区分不同能力水平的问题,可以更准确地评估被试者的能力。
与此相反,一个区分度较低的问题意味着无法很好地区分不同的能力水平,测试可能缺乏有效性。
最后,区分度还可以用来评估测试题目的质量和优劣。
具有较高区分度的问题更有助于提供准确的测量结果,因为它们能更好地区分不同能力水平的被试者。
反之,具有较低区分度的问题可能引入测量误差,从而降低测试题目的质量。
总结而言,区分度是测试或测验项目的一个重要指标,它反映了一个问题在回答正确的人群与回答错误的人群之间的差异程度,具有较高的区分度的问题能够更好地识别被试者的能力,从而提高测试的准确性和有效性。
项目的区分度分析
第三章第二节项目的区分度分析第二节项目的区分度分析一、项目区分度的意义项目区分度(Item Discrimination),又称项目的鉴别力,指项目得分对被试心理特质水平的区分能力或称鉴别能力。
区分度高的项目能将不同水平的被试区分开来,区分度低的项目不能将不同水平的被试区分开来,不同水平的被试的得分差不多。
二、项目区分度的计算(一)项目鉴别指数法这是项目区分度分析的一种简便方法,比较测验总分高分组和低分组在某一项目上的通过率的差异,作为项目鉴别指数。
计算公式为:D= PH -PL(公式3-5)其中,D为鉴别指数,PH 为高分组在该项目上的通过率,PL为低分组在该项目上的通过率。
D值越大,项目的区分度越大,反正也然。
例6,某高中物理测验,被试共18人,高分组和低分组各取总人数的27%,则两组各为5人,第五题高分组5人全部答对,低分组只有1人答对,计算该题的鉴别指数。
(1-=)(二)相关分析法我们一般以总分(或效标分数)来衡量被试能力或成就的高低,被试总分高,在某个项目上的得分也高,说明该项目于总分具有一致性,从这个项目上就可以鉴别出被试水平的高低,那么这个项目的鉴别力就高;反之也然。
也就是说,项目与总分的相关高,项目的鉴别力就高。
所以,我们可以用项目的得分与总分的相关来衡量项目的区分度或称鉴别力。
1.点二列相关(Point biserial correlation)适用资料:两列变量中,有一列为等距或等比的数据而且其总体分布为正态,另一列变量只是名义上的变量,按事物的性质划分为两类,如性别分为男、女,选择答案的是、否;有时一个变量是双峰分布也可以划分为二分名义变量。
如,文盲与非文盲。
就识字量来说可能是一个双峰分布。
计算点二列相关的公式是:r pb = [(Xp-Xq)/St]* (pq)1/2(公式3-6)rpb:点二列相关系数;Xp:答对该题的被试在总分上(或效标分数上)的平均得分;Xq答错该题的被试在总分上(或效标分数上)的平均得分;St全体被试的总分(或效标分数的标准差);p为答对该题的人数百分比;q答错该题的人数百分比,q=1-p。
测验项目的区分度
具有良好区分度的项目,能将不同水平的被试区分开来,也就是 说,在该项目上水平高的被试得高分,水平低的被试得低分。反 之,区分度低的项目则对不同水平被试不能很好地鉴别,水平高 与水平低的被试,所得分数差不多,甚至正好相反。所以测量专 家们把试题的区分度称为测验是否具有效度的“指示器”,并作 为评价项目质量,筛选项目的主要指标与依据。必须指出:评价 测验项目区分度高低倚赖于对被试水平的准确测量,通常称作为 内部效标
项目鉴别指数评鉴
鉴别指数
题目评价
0.40以上
很好
0.30~0.39
良好,修改会更好
0.20~0.29
尚可,仍需修改
0.20以下
差,必须淘汰
检验方法
• 1 积差相关系数检验的方法,进行检验 • 2 用t检验的方法进行检验看两组连续变量
的平均数差异是否显著,如果差异显著, 表明相关系数显著;如果差异不显著,表 明相关系数不显著。
为二分名义变量(见统计书)
积差相关
• 适用资料:两列数据都是测量的数据;两 列变量各自总体的分布都呈正态,即正态 双变量
• 以上四种相关法,在实际项目分析中,使 用要依据变量的性质而定。
区分度与难度的关系
• 1 较难的项目对高水平被试区分度高,较 易的项目对水平低的被试区分度高,中等 难度的项目对中等水平的被试区分度高。
• 2由于人的多数心理特性呈正态分布,所以 项目难度的分布也以正态为好,即特别难 的与特别容易的题目较少,越接近中等难 度的题目越多,而所有项目的平均难度为 0.50。
• 项目分析的特殊问题——选择题反应模式 的分析
区分度的相对性
• 1 不同的计算方法,所得区分值不同。不同 的计算方法,所得区分值是不同的。因此 在分析同一个测验时,各个项目的区分度 要采用同一种指标,否则不便分析比较。 2 样本容量大小影响相关法区分度值的大 小一般说来,样本容量越小,其统计值越 不可靠。所以在计算出r值后,不能仅从数 值大小判断试题的优劣
- 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。
第三章第二节项目的区分度分析
第二节项目的区分度分析
一、项目区分度的意义
项目区分度(Item Discrimination),又称项目的鉴别力,指项目得分对被试心理特质水平的区分能力或称鉴别能力。
区分度高的项目能将不同水平的被试区分开来,区分度低的项目不能将不同水平的被试区分开来,不同水平的被试的得分差不多。
二、项目区分度的计算
(一)项目鉴别指数法
这是项目区分度分析的一种简便方法,比较测验总分高分组和低分组在某一项目上的通过率的差异,作为项目鉴别指数。
计算公式为:
D= P H-P L(公式3-5)
其中,D为鉴别指数,P H为高分组在该项目上的通过率,P L为低分组在该项目上的通过率。
D值越大,项目的区分度越大,反正也然。
例6,某高中物理测验,被试共18人,高分组和低分组各取总人数的27%,则两组各为5人,第五题高分组5人全部答对,低分组只有1人答对,计算该题的鉴别指数。
(1-0.2=0.8)
(二)相关分析法
我们一般以总分(或效标分数)来衡量被试能力或成就的高低,被试总分高,在某个项目上的得分也高,说明该项目于总分具有一致性,从这个项目上就可以鉴别出被试水平的高低,那么这个项目的鉴别力就高;反之也然。
也就是说,项
目与总分的相关高,项目的鉴别力就高。
所以,我们可以用项目的得分与总分的相关来衡量项目的区分度或称鉴别力。
1.点二列相关(Point biserial correlation)
适用资料:两列变量中,有一列为等距或等比的数据而且其总体分布为正态,另一列变量只是名义上的变量,按事物的性质划分为两类,如性别分为男、女,选择答案的是、否;有时一个变量是双峰分布也可以划分为二分名义变量。
如,文盲与非文盲。
就识字量来说可能是一个双峰分布。
计算点二列相关的公式是:
r pb = [(Xp-Xq)/S
t
]* (pq)1/2(公式3-6)
r
pb
:点二列相关系数;Xp:答对该题的被试在总分上(或效标分数上)的平
均得分;Xq答错该题的被试在总分上(或效标分数上)的平均得分;S
t
全体被试的总分(或效标分数的标准差);p为答对该题的人数百分比;q答错该题的人数百分比,q=1-p。
点二列相关系数的显著性检验:
对Xp与Xq进行差异的t检验,如果差异显著,表明相关系数显著;如果差异不显著,表明相关系数不显著。
是两独立样本的t检验,可以用电脑完成。
如果样本容量较大(n>50),也可以用下面的近似方法:
/r
pb
/>2/(n1/2)时,认为在.05水平上显著;
/r
pb
/>3/(n1/2)时,认为在.01水平上显著。
例6,下表是某学校的15名学生在一次数学测验中的总分和第一题的得分情况,请计算第一题的区分度。
表3-1 15名学生的数学测验成绩
学生 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 测验总分90 81 80 78 77 70 69 65 55 50 49 42 35 31 10 第一题得
1 0 1 1 1 1 1 0 0 0 1 0 1 0 0 分
解: P=8/15=0.533
q =1-0.533=0.4667, Xp=68.5;
Xq=47.71;
=22.48;
S
t
=0.4624
r
pb
前面四步分步计算,都让学生用计算器完成,当然也可以通过设置两列变量,用计算机来做,不过最后一步还是得列式计算,通过电脑好像不能一步完成。
2.二列相关(biserial correlation)
两个变量都是正态连续变量,其中一个变量被人为地分成两类。
测验总分或效标分数、某个测验项目的分数都是连续变量,其中一个变量被人为地分成两类,可以是测验总分或效标分数被人为地分成两类,也可以是某个项目的分数被人为地分成两类。
点二列相关和二列相关的区分是,二分的变量总体是否为正态,正态则用二列相关,非正态则用点二列相关。
计算二列相关的公式是:
r b = [(Xp-Xq)/ S
t
]* (pq/y) (公式3-7)
r
b
:二列相关系数;Xp:答对该题的被试在总分上(或效标分数上)的平均
得分;Xq答错该题的被试在总分上(或效标分数上)的平均得分;S
t
全体被试的总分(或效标分数的标准差);p为答对该题的人数百分比;q答错该题的人数百分比,q=1-p;y为正态分布下答对百分比所在位置的曲线高度。
二列相关的显著性检验:用Z检验。
Z=r b/[(1/y)* (pq/n)1/2 ] (公式3-8)例7,下表是某学校的15名学生在一次语文测验中的总分和作文题的得分情况,作文题被人为地分成两种情况,37以上算通过,37分以下算没有通过。
请计算作文题的区分度。
表3-2 15名学生的语文测验成绩
测验总分90 81 80 78 77 70 69 65 55 50 49 42 35 31 10 作文题情
况
1 0 1 1 1 1 1 0 0 0 1 0 1 0 0
解:P=8/15=0.533
q =1-0.533=0.4667, Xp=68.5;
Xq=47.71;
S
t
=22.48;
y=0.3975(查正态分布表所得);
r=0.579
Z=1.787,不显著。
(显著性水平的值1.96、2.58)
我们可以看到上述两种相关系数的值是不同的,二列相关系数的值要大约点
二列相关系数的值。
这告诉我们:项目鉴别参数的明显差异可能是由于选择不同的计算公式造成的,因此,对同一测验的项目计算区分度时,一定要选择相同的计算公式。
3.积差相关
适用资料:两列数据都是测量的数据;两列变量各自总体的分布都呈正态,即正态双变量。
如,例7如果作为题给出的分数不是通过不通过,而是象总分一样的分数,那就可以用积差相关来计算。
这同学们已经学过了,再说,可以建立两个变量,用电脑来做。
练习1:下表是30个学生一次测验的分数,试计算第三题的难度和区分度。
学生 1 2 3 4 5 6 7 8 9 10
测验总分85 73 62 98 76 35 42 76 84 85
测验总分96 94 53 82 79 64 53 84 47 65
测验总分51 64 97 32 46 88 81 76 53 32
第3题得分0 1 1 1 0 1 1 0 1 1
练习2:下表是某大学学生的一次普通心理学期末考试的成绩总分和某一论述题的得分(满分为15分),请计算这一论述题的难度(分别用基本公式和极端分组法计算。
)和区分度。
练习3:某一心理测验1、2、3、4四个项目的难度分别为0.73、0.25、0.67、0.19,请分别计算这几个项目的标准难度Δ值。