教学系统设计结果的形成性评价和总结性评价.PPT

教学系统设计成果的评价一般包括形成性评价和总结 教学系统设计成果的评价一般包括形成性评价和 形成性评价 性评价两种形式 两种形式， 性评价两种形式，但它不同于其他评价的主要特点在于教 学系统设计成果的评价主要以形成性评价为主，也就是说， 学系统设计成果的评价主要以形成性评价为主，也就是说， 教学系统设计成果要在其形成的同时对其加以评价。 教学系统设计成果要在其形成的同时对其加以评价。
6.4
导论
内容

607寝室制作 607寝室制作
所谓教学设计成果， 所谓教学设计成果，可以是一 种新的教学方案， 种新的教学方案，也可以是一套新 的教学材料，如教科书、教学录像、 的教学材料，如教科书、教学录像、 计算机课件等， 计算机课件等，这些设计成果在推 广使用之前， 广使用之前，最好先在小范围内试 测定它的可行性、 用，测定它的可行性、适用性和有 效性，以及其他情况。 效性，以及其他情况。

第一个问题： 第一个问题：
自评
形成性评价的方法
进行中的评价
专家评议
实地试验
一对一评价
Байду номын сангаас
小组评价 返回上层

（1）自评 (Design Review) ）
设计者、 设计者、开发者或设计团队中的一些成员在将方案呈现给专 家或使用者评价之前对其进行评价。这一过程通常被称做“ 家或使用者评价之前对其进行评价。这一过程通常被称做“ 内部评议” 一般是在外部评价之前进行的。 内部评议”，一般是在外部评价之前进行的。 为使自评更有效，设计开发者应完成以下任务： 为使自评更有效，设计开发者应完成以下任务： ①制定一套评价标准 将所有设计成果搁置几天， ②将所有设计成果搁置几天，以便于形成结果与意图的距离 ③成为准执行者并试行这套方案 ④记录各种积极和消极的反馈
返回


（2）专家评议 ）专家评议(Expert Review)
主要指邀请一些内容专家、 主要指邀请一些内容专家、教学系统设计专家或者相 关领域的专家， 关领域的专家，针对教学设计各要素的选择或设计提供建 设信息， 或者） 设信息，并（或者）在方案实施之前对其中的各个草拟要 素进行评议： 素进行评议： 方案中所涉及的教学内容是否是正确的、 方案中所涉及的教学内容是否是正确的、反映最新发 展动态的？ 展动态的？ 方案中的所有观点是否是一致的？ 方案中的所有观点是否是一致的？ 提供的案例、实践练习、反馈是否是真实而准确的？ 提供的案例、实践练习、反馈是否是真实而准确的？ 教学方法是否符合并反映现代教育观念和教育理论？ 教学方法是否符合并反映现代教育观念和教育理论？ 教学的内容、 教学的内容、方法以及所用的教学资源和工具是否适 用 于教学对象？ 于教学对象？ 返回


• 形成性评价的要点：搜集数据，分析数据，然后改进 形成性评价的要点：搜集数据，分析数据， 教学设计 • 形成性评价的过程是漫长的，频繁的，从分析阶段， 形成性评价的过程是漫长的，频繁的，从分析阶段， 持续到选择和设计阶段，如果有试用期， 持续到选择和设计阶段，如果有试用期，那么这段时 期的评价也称之为形成性评价 • 作用：确定学习效果 作用： • 目的：改进学习过程，调整教学方案 目的：改进学习过程，

• 总结性评价又称事后评价，一般是教学活动告一段 总结性评价又称事后评价， 又称事后评价 落时，为把握最终效果而进行的评价。 落时，为把握最终效果而进行的评价。比如说期末 结业考等。 考，结业考等。 • 总结性评价的目的是验明学生的学业是否达到了各 总结性评价的目的是验明学生的学业是否达到了各 科教学目标的要求， 科教学目标的要求，它注重的是对被评价者所取得 的较好的成绩做出全面鉴定、区分等级， 的较好的成绩做出全面鉴定、区分等级，并对整个 教学方案的有效性作出评定。 教学方案的有效性作出评定。

这个阶段的评价可以从以下几个方面进行： 这个阶段的评价可以从以下几个方面进行： 明晰度：对于学习者个体而言， 明晰度：对于学习者个体而言，信息或者呈现给他们 的教学内容是否明了、清楚？ 的教学内容是否明了、清楚？ 影响力： 影响力：教学对于学习者个体的态度和教学目标的实 现有没有影响？在态度方面， 现有没有影响？在态度方面，需要确定学习者是否意识 到学习和自身是密切相关的， 到学习和自身是密切相关的，自己能够通过适当的努力 就可以达到目标，对学习经历感到有趣并满意；在学习 就可以达到目标，对学习经历感到有趣并满意； 成就感方面， 成就感方面，可以通过后测了解学习者是否能回忆起学 习的信息、是否能完成任务， 习的信息、是否能完成任务，具体的方法可以是书面练 口头回答问题或者是完成一件事、一个作品。 习、口头回答问题或者是完成一件事、一个作品。 可行性：如果得到所需的资源（如时间、教学情境） 可行性：如果得到所需的资源（如时间、教学情境） 那么教学的可行性有多大？ 那么教学的可行性有多大？可行性主要考虑学习者的能 力水平、教学媒体和教学环境。 力水平、教学媒体和教学环境。
返回

（4）小组评价（Small-Group Evaluation） ）小组评价（ ）
• 目的： 目的： – 确定在一对一评价后所作的改动是否有效，找出学习者 在学习中仍然存在的问题 – 确定学习者在不和教师交互的情况下使用教学材料的情 况 选择学习者：尽量代表目标人群各种类型， 20人 选择学习者：尽量代表目标人群各种类型，8－20人 类型维度： 类型维度： – 学业水平（高，一般，低）； – 习惯的学习方式； – 学习者成熟度 小组评价后应达到的效果： 小组评价后应达到的效果：能在最终教学环境中适合大部 分目标人群
返回

6.4 教学系统设计的形成性和总结性评价
1、形成性评价的方法 2、形成性评价的一般过程 、 3、影响形成性评价的一些因素 、 4、教学系统设计结果的总结性评价 、

教学系统的形成性评价方法有自评、专家评议、一 教学系统的形成性评价方法有自评、专家评议、 对一评价、小组评价实地试验和进行中的评价等， 对一评价、小组评价实地试验和进行中的评价等， 这些方法从不同的阶段为教学系统设计的优化提供 了可参考的信息。形成性评价的执行一般会经过制 了可参考的信息。 定评价计划，、实施评价计划和产生评价报告三个 定评价计划，、实施评价计划和产生评价报告三个 ，、 环节，在这个过程中，环境、学习者、评估人员和 环节，在这个过程中，环境、学习者、 评价的组织实施等都会对形成性评价的执行和结果 产生一定的影响。 产生一定的影响。

怎样选择学习者呢？一对一评价这种方法有什么特点？ 怎样选择学习者呢？一对一评价这种方法有什么特点？ 这种方法有什么特点
很明显，每次一对一试验都只有一个学习者参加。 很明显，每次一对一试验都只有一个学习者参加。这时无需从大 量学习者中随机抽取样本， 量学习者中随机抽取样本，只要挑选几个能够代表目标人群的学 习者即可。在实际评价中，可以从高于平均水平、 习者即可。在实际评价中，可以从高于平均水平、处于平均水平 和低于平均水平的学习者中各选一个，如果有必要， 和低于平均水平的学习者中各选一个，如果有必要，也可以在完 成了与这3个学习者的初步评价后再多挑选几个学习者进行一对 成了与这 个学习者的初步评价后再多挑选几个学习者进行一对 一评价。在选择学习者时，既要考虑其知识和能力的水平， 一评价。在选择学习者时，既要考虑其知识和能力的水平，也要 关心其他与学习者成绩密切相关的特征，如学习者的态度、 关心其他与学习者成绩密切相关的特征，如学习者的态度、先前 的经验、学习的风格等。 的经验、学习的风格等。 通过一对一评价，教学中的严重错误都会暴露出来， 通过一对一评价，教学中的严重错误都会暴露出来，有些可以马 上进行修改。但于由选择的学习者是有差异的， 上进行修改。但于由选择的学习者是有差异的，从每个人身上得 来的数据可能是不一样的，因此有些问题可能不会立即修改， 来的数据可能是不一样的，因此有些问题可能不会立即修改，需 要等到其他学习者重新试验后或者小组评价后才会做出改动。 要等到其他学习者重新试验后或者小组评价后才会做出改动。

• 一对一评价的关键在于它是一个交互的过程。设计人员要 一对一评价的关键在于它是一个交互的过程。 交互的过程 参与学习者的学习过程，观察学习者的参与情况， 参与学习者的学习过程，观察学习者的参与情况，并在预 先设定好的时机与学习者讨论材料中呈现的内容。因此， 先设定好的时机与学习者讨论材料中呈现的内容。因此， 在每次进行一对一试验之前， 在每次进行一对一试验之前，设计人员都应该制定一个策 决定交互该如何进行、如何向学习者进行说明、 略，决定交互该如何进行、如何向学习者进行说明、如何 让学习者知道什么时候可以和评估人员讨论、 让学习者知道什么时候可以和评估人员讨论、如何鼓励学 习者放松地谈论设计方案和学习材料等。 习者放松地谈论设计方案和学习材料等。这就要求设计人 员有比较强的交流能力，能够在自己和学习者之间建立友 员有比较强的交流能力， 好信任的关系，并进行有效的交流。 好信任的关系，并进行有效的交流。 • 在一对一评价中收集数据的途径有观察记录、学习者讨论 在一对一评价中收集数据的途径有观察记录 观察记录、 的记录、教学完成后的问卷和测验。 的记录、教学完成后的问卷和测验。在交流和记录的过程 设计人员不仅要知道问题所在， 中，设计人员不仅要知道问题所在，而且还要了解问题的 具体内容、 具体内容、学习者为什么会出现这种反应以及评估人员对 此做出的解释， 此做出的解释，因为后者往往更能提供改进教学清晰度的 有用信息。 有用信息。
• •
•

小组评价往往需要收集两方面的数据： 小组评价往往需要收集两方面的数据： 教学有效性 有效性： 教学有效性：教学有效性主要包括学习者前测 和后测的成绩以及对教学的态度。 和后测的成绩以及对教学的态度。前测一般包括 入门技术和教学目标， 入门技术和教学目标，后测测定学习者在教学目 标上的表现，可以通过测试或练习获得； 标上的表现，可以通过测试或练习获得；对教学 的态度信息则往往通过态度问卷和后续访谈来获 取。 教学可行性：一般包括学习者完成教学和所要 教学可行性： 可行性 求的绩效评测所需的时间以及在特定条件下实施 教学的成本及可行性； 教学的成本及可行性；实施或管理教学者的态度