项目分析
合集下载
相关主题
- 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。
CP=
KP-1 K-1
如果要比较两个选项数目不同的测验难度, 必须应用以上矫正公式分别将两个测验的 难度进行矫正,然后才能进行比较分析。
例:一个五择一的测题难度指数为0.50,一 个四择一测题难度指数为0.53,哪一题的难 度大?
(四)、测验难度水平的确定
1、项目难度的确定
难度分析的主要目的是筛选项目,项目难度水平取 决于: 1)测验的目的 教育工作中,若为了了解被试在某方面知识技能掌 握的情况,可以不必过多的考虑难度。
大多数测验希望能较准确地测量个体之间的差异, 选择题目时,最好使试题的平均难度接近0.50,而 各题难度在0.50±0.20之间。
2)测验的作用 一般能力测验和成就测验的平均难度在0.50左 右比较合适,筛选性测验(选拔性、竞争 性测验)则要采用难度接近录取率的项目。
3)项目的形式
对于选择题来说,难度一般应大于猜测概率; P=(K+1)/2K (K为项目备选答案数目) 对于是非题而言,其难度值应该为0.75最为合适 对于四择一题目,其难度值约为0.63时最为合适
2.极端组的划分 27%规则 一般情况下,取上下25%~33%均可。 样本少时,可以取50% D=(U-L)/N
注意:
由于计算机的方便使用,可以上下50%作为划分高低组的 标准,或者多分几组,对区分度和难度作详细分析。因 为只取上下两端,只利用了一部分资料,浪费了很多信 息,有可能得出错误结论。
2).极端分组法(上下27%)
人数较多时,难度等于总分上高分组与低分 组通过率的平均数。 P=(PH+PL)/2
2、非二分法记分(多值记分)项目的难度 P=X / Xmax X为所有被试在该项目上的平均得分, Xmax 为该项目的满分。 当测验以多值记分,且受测人数很多,难 度等于总分上高分组与低分组平均分之和 与2倍满分之比。 P= (XH + XL) / 2Xmax
/(195.4-23.13)〕=
二、项目难度
(一)、难度(difficulty)的定义 难度,指测验项目的难易程度。 在最高作为测验中,称为“难度”,而 在典型作为测验中,则指“通俗性”或 “流行性”水平。两者都是指在总体中, 能够正确或确切回答某项目的人数。 难度分析:是对项目的难度进行估计以 确定适宜的难度。
1.
P值作为项目难度的标准要注意: P值实际上是个行为标准。它不是根据项 目的本身特征来确定难度,而是通过答对 人数与参加测验人数之比这种方法来定。
难度既是项目本身又是参加测验的人的一 个特征。
2.
(三) 选择题的难度修正
在选择题测验中,猜测的成功率受项目备选答案数 目(K, 选择数目)的影响。 为平衡机遇对难度的影响,采用以下矫正:
选择每个答案的人数
正确答案
选择每个答案的 百分比
A 47 B 13 C 25
A 55 B 15 C 29
D 1
D 1
一个理想的项目应具备两个特征: 1、知道问题答案的人总能正确选择 2、不知道问题答案的人将会在可能的选项上 随机选择
(5*6)-9= 6 〔5*(-0.88)+9 构想效度 Construct validity
学习目标 掌握难度的估计方法 了解测验难度水平的确定依据 掌握项目区分度的求法 了解难度和区分度的关系
项目分析的定义 就是根据试测结果对组成测验的各个题目(项目) 进行分析,从而评价题目好坏,对题目进行筛选。 项目分析的目的 项目分析可以说明一个测验为什么是可靠的或是不 可靠的,有助于理解某些测验分数为什么能提供 预测,还能通过删掉或改善一些项目提高测验的 可靠性和有效性。 项目分析包括定性分析和定量分析 定性:内容效度、题目编写的恰当性和有效性 定量:题目的难度和区分度
测验项目的关键特征
基本问题:
项目所测量的属性是否与其他的项目测量的 属性一致 要回答这一问题需要了解以下三个方面:
1. 2.
每个选项上有多少人选择? 有多少人能够正确回答这个项目?
3.
测验中这一项目的反应和另一项目的反应相 关吗?
一、干扰项分析
通常,测验中每个多重选择题都有一个唯一 正确或理想的答案、通过考察一组被试选择不正 确选项的频率可以从中得到很多信息。 例: 基础心理学测验项目 妄想型患者的精神分裂症通常包括虐待或 高贵妄想,下面哪个选项可能是妄想型患者精神 分裂症的次级症状: A 幻听 B 瘫痪 C 记忆丧失 D 厌食
(二)、估计项目难度的方法 测验的计分方法不同,项目难度的计算 方法也不同。 二分法记分项目的难度 多值计分项目的难度
1、二分法记分项目的难度
二分法记分 :项目计分只有答对和答错两种情况,计分为 1 ,
0。 1).通过率:答对的百分比或比率 P=R/N R:答对人数,N:总人数 •当项目以0、1记分时,难度等于通过率。 •用通过率表示难度,P值越大,难度越小;P值越小,难 度越大。
(二)、区分度的计算 1、鉴别指数法 1).鉴别指数(index of discrimination,D) 的计算 D = PH - PL 取值范围:-1~ +1
来自百度文库别指数
题目评价
0.40以上
0.30~0.39 0.20~0.29 0.19以下
很好
良好,修改会更好 尚可,仍需修改 差,必须淘汰
(五)、难度对测验的影响 1、测验难度影响测验分数的分布形态 难度大,正偏态
难度低,负偏态
正态:假如在难度中等并且项目组间相关为零的 条件下,分数分布将为正态。 正偏态:由于缺乏难度低的项目,所有大部分被 试分数会集中于左侧低分数,说明测验过于困难。 (选优) 负偏态:大多数被试分数集中于右侧高分端,接 近满分,这说明测验很多,项目太容易了,缺乏 难的项目。(淘劣)
2、测验难度影响测验分数的离散程度 测验过难或过易,分数全距缩小,信度降低。
P=0.50时最佳
三、 测验的区分度 (一)、区分度的意义 区分度(discrimination )是指测验项目对被试心 理品质水平差异的区分能力或鉴别能力。 •一个项目在测验所要测量的心理属性上将具有较 高水平与较低水平的人区分开来的能力,也称鉴 别力。 项目的区分度是测验是否有效的“指示器”。