初中教师教学有效性评价问卷的编制_以学生为评价主体的视角_柳恒超

项目
F5
项目
F6
项目
F7
1
0.79
6
0.58
12
0.82
16
0.83
21
0.82
26
0.82
31
0.84
2
0.78
7
0.77
13
0.82
17
0.82
22
0.82
27
0.83
32
0.87
3
0.83
8
0.81
14
0.85
18
0.81
23
0.80
28
0.82
33
0.86
4
0.73
9
0.80
15
0.81
19
（1） 剔除因素载荷在指定因素上小于 0.40 的 项目；
（2） 根据修正指数的结果， 剔除掉允许项目与
225
其他因素上的载荷自由估计时， 修正指数较大的项目； （3） 根据修正指数， 剔除掉允许项目特殊因
子相关时， 修正指数较大的项目。 通过验证性因素分析共删掉 14 个项目， 保留
33 个项目， 最后形成 33 个项目的正式问卷。
结构化问卷调查的目的是获得语言素材、 用学 生熟悉的语言编制问卷项目。 调查对象为山东某中 学 1－3 年级的 20 名初中生， 10 名初中教师， 山东 某高校教育系 10 位心理学及教育学教师。 分学生 组、 教师组、 专家组对 54 个项目的语言适切性进行 评价。 删掉两个语义重复和学生不理解的项目， 初 测问卷的项目由原来的 54 个项目变成 52 个项目。 3.3 项目的重要性分析
验证性因素分析不仅可以对已有假设的测量结 构进行验证， 而且可以根据因素分析中提供的信 息， 如因素载荷、 修正指数等， 对项目的测量信 度、 项目与假设因素之间的关系以及项目与项目之 间的关系进行分析， 进而淘汰不好的项目。 验证性 因 素 分 析 所 用 软 件 为 LISREL8.53。 剔 除 项 目 的 规 则如下：
1 引言
评价是教育革新的基石 [1]， 对教学活动的评价 研究一直是心理与教育测量专家关注的重要问题。 1927 年 ， Remmers 首 次 发 表 了 有 关 教 师 评 价 的 研 究， 并探讨了评价的信度、 效度等基本问题 [2]。 此 后， 有关教学评价的研究逐渐增多。
教师教学活动的评价是在 “教学有效性 （teaching effectiveness）” 这个框架下进行的， 但在 现行有关研究中， 对教学有效性的定义大都定向于 知识教学， 围绕着学生对知识的掌握来评价教学行 为。 由此而编制的测量工具大都体现了知识讲解等 “以教师为中心” 的教学思想 [3]。 Wilson 认为这些 测 量 工 具 代 表 了 一 种 保 守 的 教 学 法 （conservative pedagogy）， 导致教师主动， 学生被动、 客体化 [4]。
因此， 本研究从学生评价的视角， 吸收了现代 心理学理论的一些教学思想来定义教学有效性概 念， 按照严格的心理测量学程序编制一套具有良好 测量学品质的学生评价初中教师教学有效性的测量 工具， 希望为我国的基础教育服务。
2 初中生评价教师教学有效性的理论 维度的确定
收稿日期： 2009-3-3 作者简介： 柳恒超， 男， 上海行政学院人力资源测评研究中心， 讲师。 通讯作者： 骆 方， 女， 北京师范大学心理学院讲师。 Email： dao.le@。
3 初测问卷的编制
初测问卷的编制经过了三个过程： 初测问卷项目 的收集； 结构化问卷调查； 问卷项目的重要性分析。 3.1 初测问卷项目的收集
初测问卷的项目主要来源于国内外有关教学有 效性评价的一些研究成果以及自己编写的项目。 Cohen 的元分 析 提 供 的 评 价 者 应 该 重 视 的 17 项 课 程 和 教 师 特 征 [11]； Elaine Kolitch 与 Ann V. Dean 的 体 现 批 判 性 教 学 模 式 的 项 目 [10]； 美 国 公 立 学 校 Jackson 学区强调教学 “以学生为中心” 的 6－8 年 级的学生评价教师教学的项目； 根据人本主义、 结 构主义、 多元智力等心理学理论的教学思想， 自己 编写的 19 个项目。 共计 54 个项目。 最后形成 54 个项目的 《课堂教学效果评价项目调查问卷》 （教 师版、 学生版和专家版）。 3.2 结构化问卷调查
4 问卷初测和项目分析
被试为山东某中学的 1－3 年级的 415 名初中生。 4.1 初测问卷的项目区分度分析
首先计算出每个维度的总分， 再计算出每个项 目与所在维度总分之间的相关， 删除区分度较小的
第3期
项目。 初测问卷中的项目区分度都在 0.5 以上， 所 以在这里没有删除项目。 4.2 初测问卷的因素分析
此步骤的目的是确认 52 个项目对测量教学有 效性行为的重要性程度。 重要性问卷采用 7 点评 价， 分为学生样本和教师样本。 被试为山东某中学 200 名 1－3 年级的初中生， 50 名各科教师。
分别分析两个样本对项目重要性的评价， 删除 两个样本中共同认为不重要的项目。 首先计算各项 目得分的平均数和标准差， 接着剔除平均数低、 标 准差大的项目。 平均分高表明项目的重要性高， 标 准差小表明评定者对项目的重要性程度评定结果一 致。 重要性分析最终删除 5 个的项目， 并修改了另 外 8 个项目， 这样就形成了本研究的初测问卷， 共 计 47 个项目。
摘 要 在教学有效性的框架下， 从学生评价的视角， 编制了 《初中生评价教师教学有效性问卷》。 首先， 在理 论研究的基础上， 通过项目的收集， 结构化问卷调查， 项目的重要性分析三个过程形成初测问卷。 然后， 进行初 测问卷的施测， 通过区分度分析和验证性因素分析删除项目， 最终形成 《初中生评价教师课堂教学效果问卷》 的 正式问卷。 最后， 对所编制的问卷的心理测量学指标进行了检验， 结果表明该问卷具有良好的结构效度、 交叉效 度和较高的内部一致性信度。 关键词 教学有效性， 学生评价， 初中教师。 分类号 G441
习材料/价值感、 教学激情、 教学组织、 师生交流、 师生良好关系、 教学范围、 考试/评分、 作业分派 和 学 习 负 担/课 程 难 度 [7]。 在我国教学评价的实践 中， 主要以学生的考试成绩作为评价教师教学有效 性的主要指标， 这种评价方式是造成应试教育的重 要原因。
对于教学评价来讲， 评价主体的评价能力是个 重要问题， 初中生是否具备评价教师教学的能力 呢？ 从思维发展特点上看， 初中生的思维虽然会显 得片面、 偏激， 但抽象思维开始占相对优势， 思维 的独立性、 批判性有了显著发展 [8]。 在对教师态度 上， 初中学生已经不像小学儿童那样偏向于情感上 的依恋， 而是开始有了较高的独立评价能力。 总 之， 由于初中生思维能力的发展， 抽象思维能力逐 渐占优势， 思维的独立性、 明辨是非的能力增强， 能够对教师的教学做出较为客观的评价。
本研究所确定的教学有效性的 7 个维度的含义 如下： （1） 学习/发展感： 通过教师的课堂教学， 学生感觉到掌握了本学科的知识与学习方法， 学习 兴趣有所提高， 并且在自学能力以及思想品德上也 有所发展； （2） 知识教学： 教师对教学有热情， 对课堂教学能做到精心准备、 讲解清楚、 重点突 出、 富有吸引力； （3） 群体互动： 教师鼓励学生 发表不同意见， 鼓励师生之间以及学生之间相互讨 论； （4） 鼓励性评价： 教师在对学生的学习情况 进行评价时， 能够做到客观公正， 富有鼓励性， 并 且尊重学生自己的意见； （5） 尽责与尊重： 教师 对待所有学生都很公平、 负责、 富有同理心， 关心 学生的成长和发展， 师生之间人际关系和谐； （6） 知识宽度： 教师的知识面比较宽广， 除了对本学科 的知识比较精通外， 还知道其它学科的一些知识， 能够做到理论联系实际； （7） 功课量与难度： 讲 课速度、 作业量适度， 讲课难度适中。
根据理论假设和前面的分析， 整个问卷有 7 个 维度， 提出本问卷的一阶 7 因素模型。
用 LISREL8.53 对一阶 7 因素模型 进 行 验 证 性 因素分析， 得到模型的整体拟和情况如表 3。
MODEL
表 3 一阶七因素模型整体拟和指数
χ2
df χ2 ／ df NFI NNFI IFI CFI RMSEA
学生是教师教学最直接的感受者， 而且教学的 最终目标也要体现在他们身上， 所以来自于学生的 评价是比较客观和直接的。 学生评价在对教师教学 提供诊断性反馈方面具有独特的作用 [5]； 实证研究 证明， 学生评价对教师教学具有中等水平的促进作 用 [6]。 国外关于学生评价教学有效性的研究主要集 中于高等教育领域， 例如 Marsh 的 《教学质量量表 （SEEQ）》 就是比较成熟的、 影响较大的评价高校 教师教学有效性的量表。 该量表分为 9 个维度： 学
5 正式问卷的结构与测量指标分析
这一步的主要目的是对正式问卷的结构和心理 测量学指标进行分析。 被试来自山东的三所中学， 共计 1159 名初中生。 5.1 项目区分度分析
分别求测验中每个项目与所在维度平均分数的 相关， 结果如表 1。
表 1 正式问卷的项目区分度分析
项目
F1
项目
F2

项目
F3
项目
F4
表 2 初中生评价教师教学有效性问卷 7 个维度的 内部一致性信度
维度 F1 F2 F3 F4 F5 F6 F7
信度 （α） 0.83 0.85 0.84 0.88 0.89 0.88 0.82
表 2 的结果表明， 7 个维度的 α 系数都在 0.82 以上， 整个问卷的一致性信度 （α 系数） 为 0.968， 说明整个问卷具有较高的信度指标。 5.3 结构效度分析
心 理 与 行 为 研 究 2010， 8（3）： 223～229 Studies of Psychology and Behavior