启明英语口语计算机考试系统综述

启明英语听说计算机考试系统

1.1 概述

英语听说计算机考试系统是一套采用现代化计算机技术辅助实现听说考试的系统。与传统的考生直接面对考官的口语考考试方式不同，代之以考生面对计算机，由计算机向考生显示和播放预先录制好的考试题目，考生在计算机面前回答问题，计算机录制并收集考生的答题录音，而后集中由评判教师统一评分。计算机辅助听说考试系统有以下特点：

大规模考生可以同时进行考试；

考试、评卷分离；

考官发音标准，每个考生听到的声音都是一样的；

考试题型丰富多样。

这套考试系统方案，我们根据听说考试的特点，充分融入了启明电子多年在教育行业积累的经验和先进的技术与理念。

1.2 系统业务模型

1.2.1 英语听说计算机考试的概念

考生信息：用于验证和区分每一个参加考试的考生的信息表。一般包括考号、姓名、考点、试室等。

试题信息：由试题制作功能模块生成的试题文件包。这是一套完整试题的文件的集合。

开考指令：在所有的考前准备工作完毕后，监考员就可以启动系统的开始考试指令。随后考试系统将在预先设好的时间间隔内，依次播放考题的内容，考生根据提示录制答案。考生的考试是在统一的指令下完成的。

数据打包：考试完毕后，以考生为单位打包答案，经加密、压缩后的考生答案传输到服务器端；当本场考试结束后，所有考生的答案压缩包又打包成一个以试室为单位的压缩包，以便于传输或刻录，将来评卷也是以试室为单位。

1.2.2 工作流程

听说考试具有时间短、规模大、数据保密性强的特点，必须严格按操作流程来进行。所有监考的教师，考试前一定要进行适当的培训，以掌握听说考试的操作过程。具体工作流程如下：1.2.3 模块结构

模块组成结构如下图所示：

1.2.4 功能描述

考试服务端

考生管理：导入考生信息；新增、修改、删除、保存个别考生信息、初始化考生状态信息试题管理：信息认证、试题信息装入

考试设置：设置答案汇总目录、控制登录时机、控制考试的开始、结束状态

FTP/HTTP服务器：为登录到系统的客户机提供FTP/HTTP服务

考试客户端

考生登录：考生输入自己的考号，登录到考试系统；系统检测是否重复输入或错误输入，若不正确，就拒绝考生登录

设备检测：考生登录后，检测所用计算机录、放音设备

考生考试：所有考生准备完毕后，监考教师就可以启动开考指令，考试客户端进入考试状态，此时考生只需根据提示录音，不能进行别的操作。所有的考生所看见的题目是同步进行的，确保考试的公平性。

1.3试题制作

试题制作部分是整个英语口语考试的入口。考试题型的确定，直接关系到考生平时练习的方式，考生口语水平能够通过这样的考试方式得到真正的提高。因此，良好的试题类型，通过计算机丰富的表现形式，能够达到理想的考试效果和教学效果。

本系统在经过精心的调研结合已有系统的经验，制作了这套适合各种试题类型的试题制作系统。

一、试题素材多样性

充分运用多媒体技术，在考试题型上有更丰富的选择，试题可以是各种媒体材料综合组成，试题制作过程是要根据各种类型的题材（图片、文字、声音、视频图像、flash动画等），制作出多种类型的口语试题；制作完成的试题通过加密形式存放；试题既可以存放在本地，也可以通过光盘、磁盘、网络传输。

二、试题题库海量

多种类型试题的组合，又能得到多套试题，从而建立了题库资源。

三、题型多元化

启明“人机对话”系统不仅仅能够实现英语口语考试，还可以进行听力、及用于笔试作答的主观题型——写作、选择题、判断题、改错题等等。换言之，只要条件允许，整个英语考试科目内容可以通过启明“人机对话”系统来实现考试。

1.3.1试题制作流程

1.3.2试题制作部分子模块

1.3.3各子模块的功能：

题库设置：设置题库存放的位置；

试题制作：指定试题类型，输入，录制说明信息，配置相关控制项，组织相关媒体信息。套题制作：根据已经制作完毕的各种类型试题，进行排列组合，得到套题；

模拟套题制作：和套题制作类似，不过是专为考生练习用的；

给分板制作：是为以后的评卷制作评分模板（供学校，考生自己练习时评卷用，不适用网上评卷，网上评卷的给分板是由专家在评卷之前给定的）；

1.4评卷部分

参照过去人工评卷的方法，我们将系统按照三个阶段来评卷,并且在计算机系统的控制下，过去许多好的评卷思想由于客观条件无法实现或不能很好的实现，现在可以得到充分利用，

不仅能提高评卷质量，更能促进和考察评卷员评卷质量：

试评阶段：将随机抽取的试评试卷分发给评卷员评卷，主要是统一评卷员对评分标准的掌握尺度。试评试卷来自于考生的正常答卷，对它的评卷不影响考生的最终成绩。

正评阶段：主要将考生试卷随机地分发给评卷员评卷，系统经过误差控制，产生考生的最终成绩。在这个阶段，评卷员的评卷状态分为三个：学习状态、测试状态、评卷状态。在学习状态，评卷员得到的是学生试卷，为的是让评卷员精确掌握标准；在测试状态，评卷员得到是测试试卷，通过这种试卷，衡量评卷员掌握评分标准的情况。在评卷状态，就是真正产生考生成绩的正式评阅状态了。

重评阶段：对评卷结果进行最终确认。例如零分试卷和满分试卷的确认。需要说明的是这些试卷不经过误差控制，评卷结果就是考生的最终成绩，所以建议选取比较稳定的评卷员来评卷。

为了最好的控制阅卷的质量，在正评阶段对评卷员个人又分成三个阶段：学习阶段、测试阶段、评卷阶段。在学习阶段和测试阶段使用的试卷是严格挑选的。通过学习阶段的评卷使评卷员进一步掌握评分标准；通过测试阶段的评卷检验评卷员对评分标准的掌握情况，来决定评卷员是否可以进入评卷阶段。

1.4.1评卷流程图如下：

1.4.2主要业务流程

评卷

对于普通评卷员，主要任务是进行评卷，对他们的要求较低。登陆系统后，系统根据他的评卷定义，自动调度一份试卷给他，评卷员给出相应的分数后，系统自动调度下一份试卷。实时统计和人工抽查

实时统计和人工抽查试卷是评卷过程中主要的人工评卷误差控制方法，一般是由各级组长来完成。组长登陆系统后，自动进入到实时统计界面，结合平均分、标准差、给分分布、工作量等曲线，可以实时监控到每位评卷员的当前工作状态，对于不稳定的情况及时进行调整。误差控制原理

误差控制模型

试题分类：

根据实际情况分为两大类：无误差控制试题和有误差控制试题。

有误差控制试题指试题的分值大、答案多样、评卷的人为误差比较大，例如作文题。这些试题需经过几个评卷员（一般情况下最多有4个评卷员）的评分，系统根据误差控制理论，产生考生的最终成绩。

无误差控制试题指试题的分值小、答案比较确定、阅卷的人为误差比较小，例如填空题。这些试题系统只需要一个评卷员进行评分就给出考生的最终成绩。

误差控制模型：误差控制模型工作方式为：首先将试卷分发给评卷员1和评卷员2进行评卷得到分数为X1和X2，系统比较X1和X2，如果在允许的误差范围内产生考生的最终成绩；否则将试卷分发给评卷员3得到分数X3，系统检测X1、X2、X3中误差最小的两个分数，如果在允许的误差范围内产生考生的最终成绩；否则将试卷分发给组长做最终评卷。

一致性控制

在评卷过程中，虽然通过误差控制有效的抑制了考生成绩的评判误差，但是所有评卷员在评卷中对标准掌握的是否一致和每个评卷员在评卷过程中对标准的掌握是否一致均影响着评卷的质量、速度和考生的成绩。系统通过以下两个控制来进一步抑制误差、提高阅卷的整体