多项选择题的设计原则与干扰模式_戴曼纯

影 响面 大
尤 其 是 大 型 的全 国 性 考 试 包 含 的 多 项 选 择 题 比 例 大
、
参
多 项 选 择 题 的 命 题 质 量 高 低 决定 着 试 题 的 效 度
。
信 度 和 区 分度
喻爱 菊
,
,
或者
郭浩
成 胁 着 多 项 选 择 题 存在 的 合 法 性
1994 )
国 内有 不 少 学 者 (张 颖
多 项 选 择 题 通 常要 经 过 命 题
,
。
、
预测
,
、
项 目分 析
、
筛选
、
杂 的过程
,
其中
,
命题 是 第 一 大 关
。
因 为 如果 题 目 设 计 不 当
,
以 后 的 工 作 将失 去 意 义
,
组题 等 复 下面
。
的设 计 原 则 将 有 助 于 命 题 人把 关
第一
,
确保 试 题的 效度
v
众 所周 知
搭 配 或词 序 等
t
.
值 得注 意 的是
e
C E T 4 试 卷 中有
。
不 少 干 扰 项 是生 造 的 语 法 结构
例
T h e 二a
o u
。
百度文库
下 面 几 例供 读 者 同仁 揣摩
o st o
h w
a s e a n e e
lle d b e e a u s e m
f th e m
m b ers
to
ra
te
A
)
to
,
B) by
由于 语 境 不 充 分 现 两 个 正 确 答案 分之 六 十
。
限 定性 不 强
“
・
,
孤 立 地 从 该 句 结 构 和 意 义 来看
,
_
a
lm
o st
6 0 P er e e n
r
t
in
th e
P a s t 2 0 ye a r s
.
C 夕f o
D
,
)
w ith
闰 和
e
a e
t
8
e o e
l
k
.
A
C
。: 例一
) w ill
)
e a
ha v
h
ha d
ha d
u r
n
a ve r
_
eo u
m y b a th b y
t he n
B ) w ill b e h a v i D
Sa n Fra n
e se o i
lly
eo o
l in
th e s u
bu t Lo
s
A
o
g e le s D
_
匀
第五 尤 为突 出 例
5
,
15
r a re
ly
B)
ra re
ly is
C ) h a r d ly is
。
夕1
每 道 选 择 题 只 允 许 有 一 个 正 确 答 案 或 最 佳 答案
语 言 运 用 中 并没 有 多 项 选 择
n
因而 多项 选择题 的表
、
a c f 面 效度 ( e
i t e r i 怀r
o n
l id a i t y
) 低
。
,
但是
, ,
,
如 果 试 题检 查 了 教 学 (或考 试 ) 大 纲 规 定 的 学 习 内 容
e n t t
,
有
效 地 衡 量 了 考 生的语 言 水 平
选 C ) 反 映 时态 没 学 好
,
, 选 D ) 则 说 明 倒 装没 掌握
、
不 便 于 对 测 试 结果 进 行 干 扰分 析
。
。
第七 的 难度 例
。
,
设计 干 扰 项 时 不 宜 生 造 语 法 结 构
,
,
词 的 搭配 等
, ,
语 法 题 的 干 扰 项 最 好 合乎 语 法
,
,
虽 然不适 合此题 义外
它 只 测 量 了 考 生 的语 言 接 受 能力
,
脱离 上 下 文
、
,
对 衡 量 整 体 语 言交 际
。
能 力 意义不 大
n i 试 (
te
识 别能 力
推理 猜测 能 力 等
这 种测 试 在
,
一 定 程 度上牺 牲效 度 来 取 得 信度 (王 振 亚
t t r t g a ie v e s )
199 4 )
,
。
。
有 时 题 干 部 分 的 措 辞 也 有 可 能 包 含某 种暗 示
。
会 猜 的 考生
,
受 此 影 响提 高 了 命 中 率
例
4
:
因此 降 低 了 区 分 度
15
u su a
例
4
中的 A ) 和 B 少两 个 选 择用 了 同 样 两 个 词
m m
er
,
暗 示 着 答 案就 在 它 们 之 中
。
题 干不 同于干 扰 项
、
不 应 对考 生 产 生 干 扰
而 应该
在 不 违 背 经 济 原 则 的条 件 下 措 辞 清 楚 明 了
,
准确 无误
,
一 道 题 目的 区 分 能 力 差 有 时 是 题 目不
使 学生 产生 不 同 的 理 解
3
:
3
的语 境 不 充 分
ver
无 法 区 分 考生 对这 些 情 态 动 词 的 掌握情
,
,
19 88;
,
199 3,
儒
式
,
从 不 同 角 度 探讨 过 多 项 选 择 题
,
但 尚未 涉 及其 命题 原 则
特 别 是 干 扰 项 的 设 计模
。
。
笔 者 希 望 本 文能 填 补 这 一 空 白
一
、
对 更 有 效 地 利 用 这 种题 型 起 到 有 益 的 指 导 作 用
争 议 中 的 多项 选 择 题
外语 界 1 9 9 6 年 第
2
2 期) 期 (尝 津6
多项 选择 题 的 设计 原 则 与 干 扰 模 式
湖南 大学
多 年来 考 人数 多
说
, ,
戴 受纯
,
,
我 国 各 级 各 类 英 语 考试 中广 泛 使 用 的多 项 选择题
,
。
对 教 师 的 教学 和 学 生 的学 习
,
方 法 与 态 度 产 生 了 不 容 忽视 的 影 响
t
o
a
sta n
e e
da rd
to
e e
eo u r
A
) b j
)w
to
o u
d
h a v in
te
g ha ve
B)
o
j b
ee
ted
o
ha v e
.
_
ig
a
m
a
te
h 、 it h
C
e re
j b
P
d
0
to
,
D I
)w
e re
j b
e e te
d to h a i v
n
g
例
9
:
e P呈 k m
,
i
H
A
e
sn
,
t sh o w n
ti
u
P 界t
bu t l m
,
e
P X
ee
tin
a
g
t
a
h im
a n
to
i
)
t o 二e
m
t
e e
B)
y tim
e
C)
t t h is tim
5
D
r
)
o
t th e
a s
.
tim e
_
u
.
例
2
:
Bo b
le g g
o
hu
c
t
A ) w h ile h e 15
h dy
a
,
L d
a
o
及其 追 随 者 认 为 语 言 是 一 套 由 形
,
语 言 可 以分 解 成 若干 项
9 ) 7
。
Fa 准 确 估计 考 生 的 语 言 能 力 ( r
19
多 项 选 择 题 就 是在 这 种背 景 下 产 生 的
sc
i 新 形 势 下 的语 言 测 试 采 用 分 离式试 题 (d
因
,
而两 者是 互 补 的
近
,
,
亦即
多 项 选 择 题 便 于 考 查 听 力 和 阅 读能 力
, ,
与语 言运 用实 际情 况比 较 接
。
而
口 语 和 写 作则 非 用 综合 性 试 题 不 可
否 则 测 试 也 达 不 到 预 期 的 目的
值得 一 提 的 是
。
多 项 选 择 题 在 评 卷工 作 中 明 显优 于 其 它 测 试 形 式
:
但 应 确 实存 在 于 其它 上 下 文
S m ith
a se dy 卫 d
因 为 生 造 有 可 能 暗 示 出 正 确 答案或 降低 题 目
错 误 的信 息 使 学 生 形成 错 误 的假设
.
妨 碍 以 后 的学 习 (戴 曼 纯
.
9 叨) 1
。
7
M
A
:
u s
to
w it h d
ra
w
)
50
度
v
那 么 它 便具 有 了 内容 效度 ( o c
v
l id a i ty) 或 至 少 有标 准 效
l i a d i明
例如
如 果 学生 只 学 了 大 学 英 语第 一 册
而 期 末 课程考 试 试 卷 却 考
查 了 第 二 册 中 尚未 学 习 的 语 法 规则 那 么 这 道 题 便 不 具 有内 容 效度
,
出 现 一 个 以 上 的 正 确 答案 往 往 是
_
5
_
.
se a r e e
ly
由 于 命 题 人 没 有考 虑 到 题 目 的 可 能 语 境
。
这 种 现 象 在 要求 考生 选 出 最 佳 答 案 的 多 项 选 择 题 中
:
n a B ei ji g h
s eu
t
its b ir th
一
。
但是
,
也 曾有 人 将分离 式 测 试 和 综合性 测
,
进 行对 比研 究
:
,
发 现 两 者 在 测 量 的 内容 和 结 果 方 面 基 本 上 没 有 区 别
19 7 9)
, ,
a Fa 综合 性 渊 试 似 乎 只 在 理论 上而 不 是 在 统计 上 和 实 践 中 占 有 一 定 的 优 势 ( r h dy
e r
te
一
Po i
,
n
) t
,
主要 是 多项选择题
a rro
对 于它 的理
论 依 据 和 实用 价 值 张颖
,
,
学 者 们 颇有 争 议
。
反 对者 (O lle r
、
19 7 5 : C
,
ll
,
, s 19 6 1 ; S p o l k y 19 7 3 :
19 8 8 )
,
认 为 回 答 单 个 的 题 目 不 符合 语 言 运 用 实 际
“
B)
都 可接 受
,
出
,
用 A) 表示
,
・
… 降低 到 几 乎 百 分 之 六 十
”
用 B ) 则 指 … … 降 低 了几 乎 百
。
”
这 道 题 显 然 对 不 了 解 北 京 出生 率 变 化 情 况 的 考 生 不 利 为 便 于 分 析考 生 掌 握 某 一 规 则 或 语 言 现 象 的 情 况
,
本世 纪 6 0 年代
法
,
语 言 测 试 受 听 说 法 和 结 构 主 义 语 言 学 的 影响
结 构主 义 语言 学 测 试 法
,
。
,
告别 了 以 往 非 科 学 的 方
取 其 有 代 表性 的 样本便 可
。
。
引进 了心理 测量 学
、
式
意 义 和 不 同 层 次 的— 结 构构 成 的 系 统
其 特 点 是 快 捷方 便
。
、
客观 公 正
由此 可见
,
在 没 有 找 到 更 科学 的 方 法 之 前
,
,
多 项 选 择 题 将 依然 广泛 用 于 大 规 模 语 言 测
试
。
为保 证试题 质 量 二
、
我 们 不 能不 对 其 设 计 原 则 进 行 严 谨 的 探讨
设 计原 则
,
为了保证 测试 的信度
、
第六
点
。
,
,
每 道题最 好 只 集 中 考 查 某 一
否则
,
在 一 道 语 法题 中不 宜 同时 考查 句 型
。
搭配
,
、
词 汇用 法 等
,
无 法 一 致 统计 干 扰 项 所
”
。
反 映 的语 言 点 的 掌 握 程 度 一 个语 言 现 象绝 非 易 事 时 态 与倒 装
。
当然
,
要 真 正 做 到 所 有 选 择 项 (特 别是 完形填 空 的 选 择 项 ) 只 考 查
例
S he
句 m
第四
,
题 目不 应 有 任 何 暗 示 或 提 示
,
_
have
s tu
d ie d
a s
y ha rd
.
u st
B) h
to
。
C)
s
ho
u
ld
D
)
o u
; t g l
to
有的人 在 设 计 选 择 项 时 没 有 保持 长度 和 (或 ) 结 构 上
。
的基本 一 致
正 确 答案 往 往 较 长
lim b in g
e u
C ) w h il
e
w
e
e
lim b d
_
例
th e
u
p u r p le
P
P
。
M u n t in B ) w h ile h e D ) w h ile w e
,
。
e
lim b e d
e re
e
P
w
lim b in g
,
第三
清楚
况
。
,
题 干 部分 应 提供 充 分 的 语 境
t h a t to
a s
get
to
n ot
e
in
v
l o
ve
ve
d
C)
50
n o
,
t
g
t
in v o
l
d
_
D
B)
50 50
。
a s
to
a
no t
g
e
t
e
i。 、 o lv e d
vo
)
th
t
n o
t to
g t in
,
lv e d
一
B ) 的词 序 属
s
:
生造
te
A
) 和
D
、
) 显 然 是 生 造 的 语法 结 构
语 言 技 能 范围 第二 注 意 经 济 原 则
,
。
,
。
因此
,
C E T 4 和C E T 6
一
一
等 试 卷 的 多 项 选 择 部 分 应 严 格 遵 照 教 学大 纲 或考试 大 纲 中规 定 测试 要 掌握 的 词 汇
。
、
句 型 以及
,
设 计 多 项 选 择 题 时题 干 和 选 择 项 必 须 简 洁
切 不 可 满 足 于 还可 以
t h e e x te n t o
“
,
命题 人 要 精 益 求 精
th a t n
下 面例
er
.
6
同时测试 了
例
6
:
N
ever
b ef o
re
ig h t
A ) h a d l 几 lt
B) 1
l e f
_
t
fm y
o
w n Po w
e
q
d id 1 f e
l
D
)
1 ha d f e lt
, ,
,
减少 不 必 要 的 词 语
移 到题 干 部分
。
特 别 是 选 择 项 中不 应 在 同 一 结 构 位 置 重 复使 用 同样 的 表 达 式 间
。
这 样 可 以节 省 篇 幅 和 读 解 时
wh i l e
a r r v e
例 例
l
和例
:
2
的 措 词 不 完 全 简洁
ha
a a
,
t 和 完全 可 以 将 选 择 项 中 的 a