基于写作自动评价系统的大学英语写作教学实践研究
融入写作自动评价系统的大学英语写作教学实证研究
融入写作自动评价系统的大学英语写作教学实证研究内容摘要:本文旨在以句酷批改网为例,探讨融入写作自动评价系统的大学英语写作教学新模式的效果。
开展实证研究得出结论:该评价系统的引入增强了学生的英语写作兴趣和信息,降低了他们写作时的焦虑感,使学生的大学英语写作水平有显著提高。
关健词:写作自动评价系统句酷批改网大学英语写作教学1.引言英语写作作为一项重要的语言技能是检验学生英语综合运用能力的有效手段。
同时,它又被公认为最难培养的语言技能之一。
它是一个循环式的心理认知过程、思维创造过程和社会交互过程(Krashen & Terrel,1983),写作能力需要在不断修改、评价、反馈的循环过程中逐步提高。
然而,在实际教学中,大班化教学很难让教师在写作上给每位学生及时有针对性的反馈。
作文批阅的费时费力也使教师不得不减少写作任务布置次数。
这些导致大学生英语写作动机欠缺,写作训练不足,水平提高缓慢。
《大学英语课程教学要求》明确提出:在大学英语教学中充分利用现代信息技术提高教学效果,特别要以网络为支撑,使英语的教和学不受时间和地点限制,朝着个性化学习方向发展。
随着网络信息技术的迅猛发展,探讨将在线写作自动评价系统融入大学英语写作教学,通过整合传统教学模式与现代网络技术优势激发学生的写作热情,使学生获得多维度反馈,从而提高写作水平是写作教学改革里重要的研究课题。
2.文献综述写作自动评价系统始于美国上世纪60年代,其在国外发展经历了三个阶段。
第一阶段开发的PEG(Project Essay Grade)主要适用于大规模考试的评分,对作文的内容关注不足。
第二阶段研发的IEA(Intelligent Essay Assessor)和E-rater分析更加复杂,包含更多词法、句法及篇章结构元素。
第三阶段开发的My Access!、Criterion,Writing Roadmap等系统提供作文总分及分项分,并给出个性化反馈,但它们主要针对英语本族语学习者。
基于写作自动评价系统的多元评价模式在大学英语写作教学中的运用
基于写作自动评价系统的多元评价模式在大学英语写作教学中的运用摘要:评价是写作教学中重要的一部分,它是对写作成果的总结和写作问题的建议。
研究基于写作自动评价系统,以句酷批改网为例,探究在形成性评价的基础上,教师与学生之间,网络与学生之间和学生之间等多元写作评价方式。
构建了网络写作教学平台中的多元互动教学模式。
在大学英语写作教学中,希望借助网络虚拟教师的角色,克服课下时间中教师位缺的问题,提高学生自主学习能力,激发学生写作兴趣,清楚地了解自身英语写作的不足。
提高写作信心,降低写作焦虑。
关键词:多元评价;英语写作;教学一、引言英语写作是二语习得中的一项重要技能,是在学习者对原有知识理解和掌握基础上的输出过程。
作为教师而言,作文的评价是写作教学中及其重要的一个环节。
通过评语或评分的方式为学习者作出及时纠正和反馈。
学生根据教师的反馈信息进行和修改,进一步完善作文。
《大学英语课程教学要求》[1]指出“大学英语教学中要大量使用先进的现代教育技术,开发和建设各种基于计算机和网络的课程,为学生提供良好的学习环境”。
这为大学英语作文教学应用自动作文评分工具提供了思路。
句酷批改网是基于语料库和云计算的英语作文自动批改在线服务,在国内各高校逐渐推广,已应用到英语写作教学中来。
它不但有效提高教师批改英语作文的工作效率,还扮演着虚拟教师的角色及时对学生提交的作文进行评价。
宏观评价出学生作文的整体水平及需要改进的地方,微观评价作文每句固定搭配,语法,用词准确性等方面,为学生直观地呈现出来,便于进一步改正。
本文是在形成性评价的基础之上,探讨句酷批改网的多元评价模式在大学英语写作教学中的应用,为英语写作教学提供建议。
二、研究综述1.写作自动评价系统写作自动评价系统(Automated Writing Evaluation system)的发展可以追溯到上世纪60年代,大致经历了三个发展阶段。
第一阶段上世纪末的写作自动评价系统实际是个评分机制,主要用于大规模水平考试的作文评分。
作文自动评价系统在大学英语写作教学中的实证研究———以句酷批改网为例
第40卷第1期教学研究Vol 40No 12017年1月ResearchinTeachingJan.2017作文自动评价系统在大学英语写作教学中的实证研究以句酷批改网为例李㊀霞㊀钟兰凤(江苏大学外国语学院,江苏镇江212013)㊀[收稿日期]㊀2016⁃05⁃22㊀㊀㊀[基金项目]㊀国家社科基金项目(14BYY074);江苏省社科应用研究精品工程外语类课题(16jsyw⁃33)㊀[作者简介]㊀李霞(1982⁃),女,湖北荆州人㊂讲师,硕士,主要研究方向为二语习得㊁应用语言学㊂㊀㊀[摘㊀要]㊀作文批改与反馈是英语写作教学的重要一环对提升学生的大学英语写作水平的作用不可低估,以教育部高等学校大学外语教学指导委员会‘大学英语教学指南“(征求意见稿)中有关教学模式改革的相关精神为指导,以基于语料库和云计算的句酷批改网为例,通过实证研究探讨自动评价系统在大学英语写作教学中的有效性㊂研究发现㊂批改网反馈及时能提高写作反馈成效,减轻教师作文评阅压力,激发学生自主写作热情,提升其写作水平,这是改进现有英语写作教学模式的有效手段㊂但研究也显示该系统存在一些不足,还需要不断更新与完善,在此基础上为作文自动评价系统的改善提出了一些建议㊂㊀㊀[关键词]㊀自动评价系统;大学英语写作;批改网;反馈;语料库㊀㊀[中图分类号]㊀G642.4㊀㊀[文献标识码]㊀A㊀㊀[文章编号]㊀1005⁃4634(2017)01⁃0057⁃050㊀引言㊀㊀近年来我国高校不断扩招,学生人数众多,师资紧张,作为基础课的大学英语普遍采用大班化教学模式,根据国家教育指导委员会2008年的调查,常规本科生与教师的比例为148ʒ1[1]㊂大学英语教师面对庞大学生群体,对学生作文评阅存在任务重㊁效率低㊁反馈不及时㊁主观性强等诸多问题㊂张雪梅认为由于反馈质量及针对性不强等问题,我国二语写作普遍存在着费时㊁低效的现象[2]㊂教育部高等学校大学外语教学指导委员会在‘大学英语教学指南“(征求意见稿)(以下简称‘指南“)为大学英语写作教学模式改革指明了方向㊂‘指南“[3]指出 大学英语应大力推进最新信息技术与课程教学的融合,继续发挥现代教育技术,特别是信息技术在外语教学中的重要作用㊂大学英语教师要与时俱进 在具体的课堂教学设计与实施过程中,融入并合理使用信息技术元素 ㊂作文自动批改系统(automatedessayscoring,AES)通过人工智能㊁网络技术及语料库技术对作文进行自动评价,其发展为基于计算机和网络技术的教学模式改革提供了新的视角㊂在国外,这种系统已在托福㊁GMAT㊁TWE等重大考试的写作评估中广泛使用㊂国内学者也陆续重视此系统的研究,并自主研发出了一些写作智能反馈平台㊂如句酷批改网㊁冰果英语智能作文评阅系统等㊂由于计算机自动评价系统在我国投入使用的时间不长,对这些平台的使用效果,国内目前还缺乏系统性研究㊂本研究拟尝试在‘指南“指导下,利用计算机和网络技术,以笔者执教的学生为实验对象,对作文自动批改系统在大学英语写作教学模式改革中的效果及影响进行深入探析㊂1㊀文献综述1.1㊀国外自动评价系统所谓作文自动评价系统(AES),就是利用计算机和网络技术对作文进行评估与评价㊂国外的作文自动评价系统比国内起步早㊂美国杜克大学于1966年开发出第一套作文自动评价系统PEG(projectessaygrader)㊂此后,人们采用统计㊁自然语言处理及人工智能等方面的最新成果,使该项技术得到了长足发展㊂目前在国外投入使用且比较成熟稳定的自动评价系统除PEG外,还有IEA(intelligentessayassessor)㊁E⁃rater(electronicessayrater)㊁IntelliMetricTM㊁HoltOnlineEssayScoring. All Rights Reserved.58㊀教学研究2016等㊂PEG比较注重语言形式,IEA则注重作文内容,而E⁃rater既重形式又重内容[4]㊂IntelliMetricTM㊁HoltOnlineEssayScoring更为先进,能从写作的各个角度,如遣词造句㊁内容体裁㊁语体语法㊁组织结构以及写作格式等分析学生的错误㊂然而以上评价系统均为英语为母语的学生而设计,对于我国二语习得者,国外现有的研究成果不一定适用,因此将开发符合中国国情的作文自动批改系统提上日程㊂1.2㊀国内自动评价系统国内关于计算机自动评价系统的研究起步较晚,但也取得了一定的成绩㊂如梁茂成教授团队研发的 大规模考试英语作文自动评价系统 于2005年申请了国家专利,得到了许多知名学者的肯定㊂有些企业也开发了此类软件,如句酷批改网及冰果英语智能作文评阅系统㊂冰果侧重作文整体评价,不指出文章的细节错误,只给出最后得分和评语㊂目前,国内多所高校正推广使用基于语料库和云计算的句酷批改网(thepigaisystem),它是一种以SAAS(软件即服务)的方式为教师和英语学习者提供英语作文网上智能批改的系统,具有反馈及时㊁按句点评㊁抄袭检测㊁提供进度报告等优点㊂1.3㊀反馈理论Ur[5]认为反馈在教学环境里通常指为了改进㊁提高学生的学习效果而对其某一学习任务完成情况发回的信息㊂在写作领域,反馈是读者向作者提供修改作文的信息㊂有效的写作反馈能帮助学生发现自己写作中的盲点及不足,促使其对作品进行反省和改进,最终提高写作水平㊂国内外学者从不同角度对反馈进行了大量调查研究㊂根据反馈的来源,反馈可分为教师反馈㊁同伴反馈以及计算机反馈㊂有些学者对教师反馈进行了深入探索,相关研究发现教师反馈对学生英语写作水平的提高起着重要的促进作用[6⁃7]㊂同伴反馈与英语写作有着正相关的关系,能够校正学生写作动机,培养批判性思维及分析技能,转变写作态度,提高读者意识,形成学习社群[8⁃9]㊂然而,也有研究者对同伴反馈提出了质疑,认为由于自身水平的限制,学生对作文表层语法等方面的修改较多,而对深层篇章结构等方面关注较少,因而很少能提供高质量的反馈[10]㊂随着科学技术的发展及计算机的普及,教育技术迅猛发展,计算机在语言教学中的作用日益增大㊂研究者顺应此趋势,提出了网络反馈方法㊂从网络资源利用㊁网络背景下的师生互动和写作软件开发应用等方面探讨了网络反馈对写作能力培养的重要作用[11⁃13]㊂然而,目前国内对作文自动评价系统在大学英语写作教学中的实证研究还不多,且缺乏系统性㊂2㊀研究设计2.1㊀研究问题本研究关注以句酷批改网(以下简称批改网)为代表的作文自动评价系统对提高大学生英语写作水平的有效性㊂具体探讨以下问题㊂1)与传统教师人工反馈模式相比,批改网提供的反馈是否能更有效地促进学生英语写作能力的提高?2)批改网是否能更好地培养学生写作兴趣和自主写作意识?3)学生对批改网应用于大学英语写作教学的态度和评价如何?2.2㊀研究对象参与本次实证研究的对象是江苏省某重点院校非英语专业大一学生,共计118人,由两个不同的平行班组成㊂随机抽取一个班为实验班(60人),教师通过批改网来辅助写作教学;另外一个为对照班(58人),教师使用传统书面反馈模式指导学生英语写作㊂本研究对这两个班进行持续两学期的比较性研究㊂为避免影响实验的效度,学生并不知晓其正在参加教学方法实验㊂2.3㊀研究方法及工具本研究采用定量与定性研究相结合的方法㊂定量研究包括采用SPSS22.0对两个班学生实验前后英语写作成绩以及问卷调查的封闭式问题进行统计,使用独立样本t检验分析检测两班是否存在显著性差异㊂利用Wordsmith6.0软件统计实验班与对照班后测作文语料;定性研究主要以教师平日观察记录以及问卷调查中开放式问题回答分析展开,以便进一步检验实验结果㊂本研究所应用的在线写作批改平台为比较成熟稳定的句酷批改网,其评价与人工评价基本一致率达到91.55%[14]㊂批改网使用流程见图1㊂. All Rights Reserved.第6期李㊀霞钟兰凤作文自动评价系统在大学英语写作教学中的实证研究59㊀图1㊀批改网使用流程图2.4㊀研究过程本研究分为以下3个阶段㊂1)实验前㊂选取笔者所带的两个班作为实验班和对照班㊂在开学初对实验班学生进行了批改网使用培训,以避免学生因不会使用该系统而影响其写作质量㊂2)实验中㊂本实验为期2个学期,共30周㊂实验班和对照班由同一教师任课,课程设置㊁使用教材及教学进度一致㊂每完成一个课程单元则布置一篇与课文主题相关的作文㊂实验班学生利用批改网写作,根据系统反馈自行修改作文,修改次数不受限制㊂对照班则采取传统的人工评阅方式进行批改,教师鼓励学生根据反馈进行自我修改㊂3)实验后㊂收集并对比实验班和对照班的写作后测成绩,并将其与前测成绩进行对比分析,统计实验班与对照班后测作文语料信息,同时对学生进行问卷调查㊂3㊀结果与讨论通过两学期的教学实验,笔者利用SPSS22.0对实验班与对照班的前测和后测写作成绩开展独立样本t检验,使用Wordsmith6.0软件统计实验班与对照班后测作文语料信息,结合问卷调查结果进行分析讨论㊂3.1㊀实验前作文成绩分析实验前,本研究对两班作文成绩进行了独立样本t检验,结果如表1所示㊂表1㊀实验班与对照班作文前测作文成绩独立样本t检验(百分制)组别人数(N)均值(M)标准差(SD)组间差异(t值)显著性(p值,双尾检验)实验班6073.8177.0687-1.4550.148对照班5875.9148.5456㊀㊀从表1可以看出,对照班的平均成绩比实验班高出2.097分,但两组写作成绩没有显著性差异(t=-1.455,p=0.148>0.05)㊂表明两个班学生作文水平相当,比较适合作为实验研究对象㊂3.2㊀实验后作文成绩分析实验后,本研究对两班作文后测成绩进行了独立样本t检验,结果如表2所示㊂表2㊀实验班与对照班作文后测成绩独立样本t检验(百分制)组别人数(N)均值(M)标准差(SD)组间差异(t值)显著性(p值,双尾检验)实验班6082.2334.37684.1070.000对照班5878.1556.2732㊀㊀表2表明,通过使用批改网进行写作辅助教学,实验班的平均成绩比对照班高出4.078分,且在统计学上这种优势显著(P=0.000<0.05)㊂与前测数据相比,两班成绩均有一定提升,但实验班学生作文成绩提高幅度明显高于对照班(提高幅度分别为8.416和2.241)㊂这说明在经过两学期批改网的使用后,实验班的学生成绩反超了对照班㊂3.3㊀实验后作文语料分析作文质量不能仅考察写作成绩,还应从诸如作文字数㊁词汇丰富度㊁句子长度等方面进行综合考察㊂表3是利用Wordsmith6.0软件得出的实验班与对照班后测作文语料统计信息㊂表3㊀实验班与对照班后测作文语料统计简表textfilefilesizetokenstypesstandardizedTTRmeanwordlengthmeansentenceslength(inwords)实验班1365412063152435.174.9816.54对照班108459561119233.544.4215.28注:TTR=type/tokenratio,STTRbasis=1000㊀㊀从表3可以看出,实验班作文语料的库容量㊁形符㊁类符㊁标准化类符形符比㊁平均词长㊁平均句长等指标均比对照班作文语料大㊂实验班的库容量为13654,而对照班为10845,王初明等[15]认为作文的长度可以作为写作质量的一个指标㊂全国大学英语四六级考试作文在字数上的不同要求也. All Rights Reserved.60㊀教学研究2016反映了作文长度是评价写作能力的标准之一㊂标准化类符形符比可以用来反映词汇的丰富程度,比值越大,用词变化量越大㊂实验班的标准化类符形符比(35.17)大于对照班的数值(33.54),因此,实验班的学生用词变化更大㊂平均词长和平均句长能部分反映词汇及句子的复杂度㊂从表3的数据来看,对照班学生所写作文单词和句子较实验班来说都相对简单㊂综上可见,实验班通过使用批改网,其在作文分数㊁作文长度㊁词汇使用㊁句子长度等方面均比对照班占优势㊂3.4㊀学生调查问卷及结果分析为进一步检验实验数据结果,了解学生对自动批改系统的态度和看法,笔者在实验结束后对实验组的60名学生进行了问卷调查㊂60份回收问卷全部有效㊂问卷主要围绕以下两点展开:(1)实验班学生使用批改网后,学生的写作能力㊁写作兴趣及自主写作意识是否有变化?(2)实验班学生对批改网的评价如何?第一,多数学生对于使用批改网进行在线写作持积极肯定态度,认为自动批改调动了他们的自主学习积极性,激发了写作信心和兴趣㊂仅有5%左右的学生反对使用该系统㊂83.3%的学生写作愿望加强㊂70%的学生认为在批改网的帮助下语言错误数量减少㊂75%的学生认为作文内容及词汇比以前更丰富㊂81.7%的学生认为总体写作水平有了一定提高,这一点与本研究的实验结果一致㊂第二,大部分被试学生认为批改网有如下优点㊂(1)评阅迅速及时,给出客观翔实的评价报告,比教师批阅效率高㊂在线提交作文之后,系统会立即作出评价,给出分数,自动识别诸如拼写㊁词汇㊁搭配㊁语法等常见错误,给出修改建议并提供相关扩展训练㊁搭配推荐㊁参考例句等,学生能随时根据评价对作文进行多次修改,提高分数;(2)提供大量详实可靠的写作语料,帮助学生提高自主学习能力㊂60%的学生会利用批改网中的语料库检索功能进行例句㊁语块㊁搭配㊁语段㊁知识点㊁同题材作文等检索㊂学生在真实的语言使用实例中自我发现㊁自我思考㊁探索语言规律,在语料驱动的学习模式(data⁃drivenlearning)下,提高自主学习能力;(3)档案系统高效方便㊂批改网为学生提供个人学习档案及学习日志,其提交的作文成绩轨迹及评价报告均保留在电子档案里㊂这对学生了解自身学习过程,掌握学习情况,进行反思非常有帮助;(4)师生交流更顺畅㊂教师可在我的网站 上传各种写作资料供学生学习㊂学生也可将自己遇到的问题发到批改网上的BBS交流平台,与教师或其他学生一起探讨㊂62%的学生喜欢这种师生㊁生生间的交流㊂第三,学生也指出了批改网在实际使用中存在的一些问题㊂(1)评语过于机械化且不够具体㊂这个结果和一些研究者的发现一致[16⁃17]㊂句酷网注重对学生作文的拼写㊁词汇及句法等方面的评价,对于写作的篇章结构㊁思想内容㊁逻辑㊁衔接与连贯性㊁批评性思维能力等方面反馈的意见较少,这也反映出计算机评价的一大缺陷,即在技术层面上没能像人一样去 欣赏 一篇文章[18];(2)批改网能指出一些语法结构错误以及学生常犯的 中式英语 ,但未给出确切修改意见,学生有时无法自己更正,需要教师给出具体反馈;(3)准确性有待提高㊂有些学生认为批改网不能准确评价作文的体裁,如学生将作文体裁写错,但仍可能得到较高分数㊂有些按句点评并未读完整个句子,武断地评价句子错误㊂因此对于批改网给出的作文分数不可盲目推崇,需客观看待㊂4㊀结束语作文自动评价系统是信息时代下英语教学与计算机技术相结合的产物㊂它的兴起极大地提高了作文批改效率,减轻了教师工作量,为学生提供了丰富的学习资源培养其自主学习能力,符合以学生为中心的教学理念㊂同时它可收集大量教学数据,详细记录学生个人学习档案,为英语教学㊁管理与研究提供了充足的资源㊂作为一种新型的在线英语作文评阅系统,批改网有利于促进外语教学朝着信息化㊁个性化和自主化方向发展,为大学英语写作教学改革提供了一个全新的视角,一定程度上代表了英语教学未来多模态的发展趋势,有着广阔的发展前景㊂但系统本身也存在一定的缺陷,如评语过于泛化㊁不能从批叛性思维等深层角度培养学生的写作能力等㊂ 把教育技术引入传统课堂并不是一个简单的工具运用问题,而是牵扯到教与学方方面面的系统性变革[16] ㊂因此,在大学英语写作教学中应构建多元反馈机制,将自动评价反馈与教师反馈㊁同伴反馈相结合,以弥补单一反馈模式的不足㊂同时,批改网应. All Rights Reserved.第6期李㊀霞钟兰凤作文自动评价系统在大学英语写作教学中的实证研究61㊀大量搜集广大师生使用者的反馈意见,及时更新语料库,并与语言学家㊁教育学家共同协作,充分利用人工智能技术,进一步提高批改网的信度㊁效度㊁智能性和可操作性,使其在大学英语写作教学中发挥更长远的功效㊂本文以批改网为例,探讨了作文自动批改系统在大学英语写作教学中的应用及效果,由于条件的限制,本研究尚存在一些局限性㊂第一,实验工具只选用了目前被一些高校广泛使用的句酷批改网,得出的结论并不一定适用于其他作文自动评价系统;第二,调查的范围较小㊂笔者只选取自己所带的两个班级来进行实验,学生样本数量小且研究周期比较短㊂因此实验结果的普遍性有待进一步做大规模的实证性研究㊂英语写作是促进学生英语综合应用能力发展的有效途径,有利于培养学习者创新和批判性思维㊁跨文化交流等素养,充分体现了英语的工具性及人文性,是大学英语教学的重难点㊂笔者希望相关研究能成为打破英语写作教学瓶颈的一个新的突破口,更好地推动我国大学英语教学改革㊂参考文献1 王海啸.大学英语教师与教学情况调查分析 J .外语界20094 6⁃13.2 张雪梅.大学英语写作教学现状之调查 J .外语界2006 5 28⁃32.3 中华人民共和国教育部高等学校大学英语外语教学指导委员会.大学英语教学指南征求意见稿 EB/OL .2015⁃05⁃06 2016⁃05⁃22 .http //wyx.zzia.edu.cn/s/11/t/333/c7/c3/in⁃fo51139.htm. 4 梁茂成文秋芳.国外作文自动评分系统评述及启示 J .外语电化教学2007 5 18⁃24.5 UrPA.Courseinlanguageteachingpracticeandtheory M .Cam⁃bridge CambridgeUniversityPress 1996 242⁃294.6 ChandlerJ.Theefficacyofvariouskindsoferrorfeedbackforim⁃provementintheaccuracyandfluencyofL2studentwriting J .JournalofSecondLanguageWriting 2003 123 267⁃296. 7 刘浩.交互性英语课堂教师反馈研究 以 个性化英语学习课程为个案 D .天津南开大学2015.8 PaulusT.Theeffectofpeerandteacherfeedbackonstudentwriting J .JournalofSecondLanguageWriting 1999 8 3 265⁃289. 9 蔡基刚.中国大学生英语写作在线同伴反馈和教师反馈对比研究 J .外语界2011 2 65⁃72.10 LekiI.Coachingfromthemargins issuesinwrittenresponse//KrollB.Secondlanguagewriting researchinsightsfortheclass⁃room C .Cambridge CambridgeUniversityPress 1990 57⁃68. 11 WarschauerM.Networkingintoacademicdiscourse J .JournalofEnglishforAcademicPurposes 2002 1 45⁃58.12 蒋学清蔡静唐锦兰.探析自动作文评价系统对大学生英语写作能力发展的影响 J .山东外语教学20116 36⁃43. 13 王颖李振阳.国外二语写作中电子反馈模式的研究评述 J .外语电化教学2012146 11⁃16.14 张跃.设计产品一定要遵循两个 凡是 EB/OL . 2011⁃07⁃31 2016⁃05⁃22 .http //www.csdn.net/article/2011⁃07⁃31/302431.html.15 王初明牛瑞英郑小湘.以写促学 项英语写作教学改革的试验 J .外语教学与研究20003 207⁃212.16 唐锦兰吴一安.在线英语写作自动评价系统应用研究述评 J .外语教学与研究2011 2 273⁃282.17 石晓玲.在线写作自动评估系统在大学英语写作教学中的应用研究 J .现代教育技术2012 10 67⁃71.18 PageEB.Projectessaygrade PEG//ShermisMD BursteinJC.Automatedessayscoring across-disciplinaryperspective C .Mahwah.NJ LawrenceErhaumAssociates 2003 43⁃54.EmpiricalstudyonautomatedessayscoringAESincollegeEnglishwritingteachingBasedonthepigaisystemLiXia ZhongLan⁃fengSchoolofForeignlanguage JiangsuUniversity Zhenjiang Jiangsu 212013China㊀㊀AbstractFeedbackplaysacrucialroleinEnglishwritingteaching.Itsimportancetohelpimprovestudentsᶄwritingskillscannotbeunderestimated.Thisstudy withtheguidanceofCollegeEnglishTeachingguidedraftversion formulatedbyELTAdvisoryBoardundertheMinistryEducation attemptstotakepigaiSystemasanexampletoexploreeffectivenessofapplyingAEStoEFLwritingteaching.TheresultindicatesthatAESnotonlyhelpstorelievetheheavyburdenofcollegeEnglishteach⁃ers butalsohasapositiveeffectonenhancingstudentsᶄwritingcompetenceandstimulatesstudentsᶄautonomouswritingenthu⁃siasm.ItisaneffectivemethodforimprovingtheteachingmodeofEnglishwriting.SomedeficienciesofsuchAESsystemhowever arealsorevealedinthestudyandthussomesuggestionswereputforward.KeywordsAES EFLwriting thepigaisystem feedback corpus. All Rights Reserved.。
大学英语写作教学中应用自动作文评分系统的实证研究
能力上 了, 英语写作教 学和写作 能力 提高几 乎成 了被 遗 忘的角落。实际上 , 语写作 能力是 英语学 习 中非常重 英 要的内容之一。通 过写作 , 英语 知识 不断得 到巩 固并 内 在化 , 为英语技能 的全面发展铺路。 … 在实际的大学英语 写作教学 中, 由于大 多数 教师作 文批改负担过重 , 改周期 长 , 生写作 训练量 少 , 批 学 直接 导致 了学生写作水平的提高缓 慢。在这 方面 , 实用 的、 面 向大学英语写作教学的 自动作 文评分方法不 失为一个 良
加 全 国大 学 英 语 四级 作 文 阅 卷 工 作 , 悉 评 分 标 准 和 要 熟 求, 经验 丰富 , 而且为 非受试学 生 的任 课老 师 , 分 主观 评
自动 作 文 评 分 ( uo a d E sy so n , 写 为 A t t s cr g 简 m e a i
AS E )系统的研究起 始于 国外 ,99年 才进 入实 际应用 19 阶段 。2国内关于计算机 自动评分 系统 的研 究虽 然起 步 _ 较晚 , 近年来还是取得 了一定的成绩 , 比如 冰果英语智能 作文评 阅系统 。而且从 2 0 0 9年起 , 越来越多 的学校开始 使用该系统 。计 算机 自动作文评分用于我 国英语作文批 改 的时间非常短 , 尽管得到 了很多专家的肯定 , 但在实 际
第 l 2卷 第 1 0期 21 02年 1 0月
鸡 西 大 学 学 报
J URNA F JXIUNI RS O L 0 I VE ⅡY
V0 . 2 No 1 1 1 .O 0c . 01 t2 2
文 章 编 号 :62—65 ( 02 1 17 7 8 2 1 )0—00 3 12—
大 学 英 语 写作 教 学 中应 用 自动 作 文 评 分 系统 的 实证 研 究
大学英语写作教学中在线写作自动评价系统应用研究
大学英语写作教学中在线写作自动评价系统应用研究摘要:以冰果英语智能作文评阅系统为例,运用问卷调查、访谈以及对学生作文样本的分析等方法探索在线写作自动评价系统在大学英语写作教学中的应用效果。
结果表明,冰果智能评价系统总体而言为多数学生所接受且有较好的效果,但仍然有许多需要完善的地方。
在此基础上为在线写作自动评价系统在大学英语写作教学中的应用与研究提出建议。
关键词:写作自动评价系统;英语写作;效果英语写作教学一直是国内大学英语教学的一个薄弱环节,大学生的英语写作能力亟待提高[1]。
一方面,学生觉得英语写作很难,对写作有畏难情绪,另一方面,写作教师觉得教学效果不佳,费力教学很长一段时间却看不到学生水平的提高,尤其是作文批改成了他们最头痛的事情。
由于学生多,作文批改量大,批改周期长,使得学生英语写作机会相应减少,反过来又制约着学生写作水平的提高[2-3]。
在这种背景下,在线写作自动评价( Automated Writing Evaluation; Automated Essay Scoring)系统就应运而生,它的出现大大减轻了教师批阅作文的负担,增加了学生英语写作的机会,受到了广大师生的青睐。
写作自动评价系统进入实际应用阶段至今已有十多年的历史,尽管国内有学者也使用自动评价系统Writing Roadmap等进行写作研究[4-5],梁茂成也研制了大规模英语考试作文自动评分系统EFL Essay Evaluator (EEE)1.0[6],但目前国内使用较多的还是句酷英语作文批改网和冰果英语智能作文评阅系统。
关于写作自动评价系统在大学英语写作中的研究在国内并不多见。
唐锦兰等对该类研究做了述评,发现国内这一研究刚起步,偏重于介绍性、探讨性[3]。
对于该类系统在课堂教学中的应用和效果的研究比较少见。
葛诗利等探讨了大学英语作文自动评分研究中的问题及对策[7];蒋学清等使用在线英语写作自动评价系统Writing Roadmap 2.0研究了自动作文评分系统对大学生英语写作能力发展的影响,发现形成性评价方式和具有自动反馈功能的在线写作工具在发展非母语英语学习者的写作能力方面可以发挥积极的作用[5];石晓玲以句酷批改网为例研究了在线写作自动评改系统在大学英语写作教学中的应用, 着重探析了在线写作自动评改系统的有效性[8];吴一安等研究了融入自动评价系统的英语写作实验教学对高校英语教师的影响,重点关注参与教师在写作教学中融入自动评价系统Writing Roadmap 的体验[4]。
写作自动评价系统在大学英语教学中的应用研究
53·版权所有文责自负·*基金项目:本文为全国教育科学规划教育部重点课题“基于现代信息技术的形成性评价工具的应用研究”(项目编号:GFA097005)的阶段性成果。
作者简介:唐锦兰,副教授,博士,研究方向:评价和测试,计算机辅助外语教学;吴一安,教授,博士生导师,研究方向:教师教育,评价和测试,应用语言学写作自动评价系统在大学英语教学中的应用研究*唐锦兰1吴一安2(1.北京外国语大学网络教育学院,北京100089;2.北京外国语大学英语学院,北京100089)摘要:本文旨在通过一项将写作自动评价系统应用于教学的实验,研究学生写作能力的发展以及写作教学过程的变化。
为期一学年的教学实验以及调查问卷和访谈数据表明,实验教学有助于学生写作能力的发展和自主学习能力的提高;写作教学重点从关注语言错误到关注内容的挖掘和表达,从关注结果到关注写作教学过程和写作教法;在此过程中,师生的角色发生变化。
本文在此项研究基础上建构了将自动评价系统融入写作课程的教学模型。
关键词:写作自动评价系统;大学英语教学;计算机辅助外语教学中图分类号:H319文献标识码:A文章编号:1004-6038(2012)04-0053-071.研究背景信息和网络技术的发展日新月异,其在教学中也得到了越来越广泛的应用。
《国家中长期教育改革和发展规划纲要》(2010-2020年)专辟一章强调信息技术在教学中的应用,指出“信息技术对教育发展具有革命性影响,必须予以高度重视。
”纲要同时提出“到2020年,基本建成覆盖城乡各级各类学校的教育信息化体系,促进教育内容、教学手段和方法现代化”的目标。
近年来大学英语教学改革的一项重要内容就是实施把信息技术融入课堂的英语教学模式。
《大学英语课程教学要求》明确规定,在大学英语教学中使用信息技术提高教学效果,使英语教学不受时间和地点的限制,朝着个性化、自主式学习方向发展。
因此使用信息技术来辅助教学,从而提高教学效率,已成为必然趋势。
写作自动评价系统在大学英语教学中的应用研究
1、实时反馈:写作自动评价系统能够实时对学生的英语作文进行评估,并 提供即时的反馈。这种实时的反馈模式有助于学生及时纠正写作中的错误,提高 语言运用的准确性。
2、个性化教学:系统通过对每位学生的学习数据进行分析,能够为不同的 学生提供个性化的学习建议。教师可根据这些数据调整教学策略,实现个性化教 学。
3、促进学习:写作自动评价系统不仅可以帮助学生提高英语写作能力,还 可以通过及时的反馈和建议,激发学生的学习兴趣和动力,促进他们的自主学习。
四、优势与挑战
写作自动评价系统在大学英语教学中的应用具有以下优势:
1、提高工作效率:写作自动评价系统可以快速准确地对学生的英语作文进 行评分和反馈,减轻了教师的工作负担,提高了工作效率。
1、技术局限性:目前的写作自动评价系统在技术上还存在一定的局限性, 例如无法完全准确地识别学生的语法错误和拼写错误等。
2、成本效益:写作自动评价系统的应用需要一定的资金投入,包括设备购 置、技术维护、数据资源等,这可能会给一些高校带来经济压力。
3、教师接受度:一些教师可能对写作自动评价系统的应用持怀疑态度,认 为它无法完全替代人工评价,也可能对学生的学习产生负面影响。
参考内容
随着科技的飞速发展,教育领域也在经历着一场深远的变革。作为这场变革 的重要一环,写作自动评价系统(Automatic Writing Evaluation,简称 AWE) 在英语教学中的应用日益广泛。该系统利用先进的自然语言处理(NLP)和机器 学习(ML)技术,对学生的英语写作进行自动评估和反馈,极大地提升了教学效 率,同时也为个性化教学提供了可能。
在数据收集和分析方法方面,研究者们运用统计分析、文本分析、深度学习 等方法对系统生成的反馈、评价和学生作文进行了细致的分析。
写作自动评价系统在大学英语教学中的适用性研究
写作自动评价系统在大学英语教学中的适用性研究吉林大学公共外语教育学院刘景珍滕薇薇【内容摘要】本文通过文献分析对写作自动评价系统进行甄别性的梳理,并结合对大学生所做的同侪采访发现:学生认为教学中写作机会少、对评分和反馈尚存疑虑,而教师也存在批改量大、标准一致性掌握困难以及批改非本族语的尴尬等情况,并揭示了写作自动评价系统的潜在适用性。
【关键词】写作自动评价系统大学英语写作需求调查一、引言依附于现代教育技术的写作自动评价系统的发展历程可追溯到上个世纪中叶,从PEG(Project Essay Grade),e-rater, Intellimerric,Intelligent Essay Assessor到本世纪初的衍生代产品: My Access,Criterion,Holt Online Essay Scoring,Writing Roadmap?以及各类提供免费批改的网站,这些软件技术的不断更新升级都致力于优化语言教学,为教育者和使用者提供更客观、便捷以及人性化的服务,与此同时也是给传统教学模式又一次革命性的洗礼。
二、写作自动评价系统简介及其在中国的发展现状在中国的语言教学中,写作自动评价系统的使用尚处于起始阶段,现存的写作自动评价系统一般都具有操作简便、多元智能、及时评分、反复修改、多次提交的功能。
它可以从五个维度(思想内容、篇章结构、词汇语法、句式运用、写作规范)提供四种题材(描述文、记叙文、说明文、议论文)作文的各级评估报告,为广大师生提供全方位的教学和科研支持,并逐步应用于全国性英语写作大赛,使广大教师受益颇深。
目前,有关写作自动评价系统应用于中国大学英语写作教学的相关文献以实证研究该系统软件辅助教学的居多:对大学生写作能力的影响、对高校教师的影响、该系统在中学英语教学和大学英语教学中的应用研究以及深入探讨该软件反馈功能的专题。
本文从大学阶段学生及教师的需求调查出发,从另一个新的角度重新审视了写作自动评价系统在大学教育阶段对辅助语言学习的必要性。
智能写作评分系统在大学英语写作中的实证研究
一
研 究背景
大 学 英 语 写作 是 衡 量 学 生 英 语 综合 水 平 和 应 用 能 力 的一
二 研 究设计
利 用 浙 江 大 学 开 发 的英 语 智 能 作 文 评 阅 系统 】 ,我 们进 行 了小 规 模 实 证 研究 性 工 作 ,研 究 通 过 问 卷调 查 、实 践操 作 过 程 , 了解 学 生学 习情 况 及 该 评 分 系统 对 学 生 写 作 的积 极 推 动 作 用 , 开 展新 的教 学 理 念 下 的基 于 网络 的大 学英 语 写 作 教 学模 式 。
了 WrigR a ma M . 线 形 成 性 写 作 评 价 工 具 。2 0 in od pT 2 t 0在 08 年 底 ,该 英 语 教 学 软 件 进 入 中 国 ,该 系 统 不 但 可 以为 学 生 在 线 提 交 的 作 文 做 出及 时 评 分 、生成 分析 报 道 ,也 可 以为 教 师
研究 旨在 了解智能写作评分系统在写作教学中的应用效
果 对 于 不 同 类 型 学 生 ( 习策 略 存在 一 定 差 异 的 学 生 )是 否 学
数或等级,缺少持续性评价。且学生因英语水平参差不齐 ,
而 存 在拼 写错 误 、 句 法错 误等 问题 ,当 学 生不 能及 时 地 得 到
存在显著性差异。教师依据调查研究结果 ,实施教学指导,
中,男性学习者在训练后写作策略的转变显著性大于女性学习者。低分组 的参与者在经过系统写作训『 练后,写作过程 中的策略
使 用 和 水 平有 显 著 性 的 提 高 。
【 关键词 】智 能写作评分:大学英语写作:评价 ;实证研究
【 图分 类 号 】G 2 中 40 【 献 标 识 码 】B 文 【 文 编 号 】 10- 8 9 (0 0 _ 0 6 ’3 论 0 9 0 7 2 1 )0 0 5 — 0
写作自动评价系统在大学生英语作文形成性评价中的应用
教师可以通过写作自动评价系统了解学生的 作文情况和问题,针对性地进行指导和辅导 ,提高了教学效果。
03
大学生英语作文形成性评价研究
形成性评价的概念与特点
形成性评价的概念
形成性评价是一种动态的、持续的评价方 式,旨在通过对学习过程进行观察、反馈 、调整和改进,以实现最佳的学习效果。 它关注的是学习过程而非学习结果,是一 种双向的、互动的评价方式。
写作自动评价系统的技术发展为英语 写作教学提供了新的工具和视角。
当前大学生英语写作教学存在的困境和挑 战,如教师负担重、反馈不及时、评价不 准确等问题,需要寻求新的解决方案。
写作自动评价系统能够提供及时、 客观、准确的反馈,有助于提高学 生的英语写作能力和水平。
研究目的与方法
研究目的
探讨写作自动评价系统在大学生英语作文形成性评价中的应用效果,验证其是否 能有效提高英语写作教学的质量和效率。
THANK YOU.
04
写作自动评价系统在大学生英语作文形成
性评价中的应用实践
基于写作自动评价系统的英语作文教学方案设计
教学目标
通过写作自动评价系统,辅助教 师进行英语作文的批改和指导, 帮助学生提高英语写作水平,培 养自主学习能力。
教学内容
介绍写作自动评价系统的原理、 功能和使用方法,结合英语写作 教学大纲的要求,设计针对不同 写作任务的评估标准和教学方案 。
特点
自动化、客观、准确、快速、个性化。
写作自动评价系统的种类与原理
种类
常见的写作自动评价系统包括Turnitin、iWrite、 Blackboard等,这些系统采用了不同的算法和模型来对作文 进行评估。
原理
写作自动评价系统主要基于自然语言处理技术、机器学习和 深度学习技术,通过分析文本的语言特征、结构特征和语义 特征等,对作文进行评分和反馈。
自动作文评分系统应用于大学英语写作教学的调查分析
年 多的大 学英 语 学 习 , 已掌 握 了基 本 的英 语 段
落 展 开方式 和作 文 的组织 结构 。由于本 学期 要参 加 四级 英语 考试 , 学 生有 大量 习作 的需 求 。
( 二) 研 究 工 具 — — 句酷 自动 作 文 评 分 系统
比较 成 熟 的 自动 作 文 评 分 系 统 有 P r o j e c t E s s a y
Gr a d e (P EG ) 、I n t e l l i g e n t Es s a y As s e s s o r
( I EA ) 、 E l e c t r o n i c Es s a y Ra t e r( E— r a t e r )、 I n —
本 次调 查 主要 针 对 句 酷 作 文 自动 评 分 系 统 ( h t —
t p : / / ww w. p i g a i . o r g , 以下 简称 批 改 网 ) 进 行 。据
t e l l Mi e t r i c TM 和 Ba y e s i a n Es s a y Te s t S c o r i n g
收 稿 日期 : 2 0 1 4 — 0 3 — 1 1
作者简介 : 钟建玲( 1 9 7 3 一) , 女, 华南农业大学外 国语学院讲师 , 硕士 ; 李勇( 1 % ~) , 男, 广西大学外国语学院讲 师, 硕士。
基金项 目: 华南农业大学 2 0 1 2年 教 改 课 题 , 课题 编号 : J G 1 2 0 9 1 。
第 3 4 卷第 4 期
师
范
学
院
学
报
Vo1 . 3 4 NO . 4
Au g. 2 01 4
自动评分系统辅助下的大学生英语写作能力发展研究
学期的教学实验和访谈调查等数据结果显示,自 动评分 系统辅助下的大学英语实验教学显著有助于大学生写作能力的发展和提
高, 也有助 于大学生 自主 学习能力的增 强。 关键词 : 作 文 自动评 分 系统 ; 大学英语写作 ; 计算机辅助教 学
Ab s t r a c t : Th i s s t u dy i n v es t i g a t e s t h e e fe t c o f i n t e g at r i n g t h e a u t o ma t e d - es s a y s od c n g s y s t e m i n t h e c o l l e g e EF L c l a s s -
司于 2 0 1 ] 年 推 出的句 酷批 改 网 ( w w w . p i 一 第 一学期 的期终卷作 文分数 , 采 取标准 化 g a i o r g ) 。这是一 款基于 语料 库和 云计算 考 试形 式( 写作 时限 3 0 分钟 , 满分 l S 分) 。 ( 2 ) 中期特训 测试 。该 特训 开展的 时
学 中要 高 度 重 视 并充 分 利 用 信 息技 术 。 测 、 学 生互 评 、 学 期总 评 、 班 级管 理 、 语料
《 大学英语课程教学要求》 ( 2 O 0 7 6 ) 也明确 库数据支持等。 本研究采用的作文自动评
规定 , 大 学英语教 学要通过 利用信息 技术 来 实施 新教 学模 式从 而提 供教 学效果 和 教学效 率 。作文 自动 评分系统 ( A E S , A u —
的英语作文 自动批改在线服务 。 它 的原理
语教师和学者对此展开了多方位的理论 是比较学生作文和标准语料库之间的距 问长度为整一个学期 , 是受试学生大一时 研究和实践探索。“ 但是就教学效果来看 , 离 ,并通过一定的算法将距离映射成分 的第二学期。 实验班学生被要求一学期在
智能评阅辅助大学英语写作教学实践研究
智能评阅辅助大学英语写作教学实践研究【摘要】本研究探讨了智能评阅辅助大学英语写作教学的实践研究。
在分析了研究背景、研究目的和研究意义。
在正文中,详细介绍了智能评阅技术的概述和在大学英语写作教学中的应用,并结合实践案例进行分析。
对教学效果进行评估,探讨了智能评阅在教学中所面临的问题与挑战。
在总结了智能评阅辅助大学英语写作教学的优势和局限性,展望未来研究方向并得出结论。
通过本研究可以为提高大学英语写作教学质量提供理论依据和实践参考,促进教学效果的提升,对于智能评阅技术在教学中的应用具有一定的推广和应用价值。
【关键词】智能评阅、大学英语写作、教学实践、研究、技术、应用、案例分析、教学效果评估、问题、挑战、总结、展望、未来研究方向.1. 引言1.1 研究背景现代社会对大学生的英语写作能力提出了更高的要求,传统的写作教学模式已经无法满足教学的需求。
智能评阅技术的发展为大学英语写作教学带来了新的可能性。
国内外学者对智能评阅技术在大学英语写作教学中的应用进行了多方面的研究和实践,取得了一定的成果。
目前对于智能评阅辅助大学英语写作教学的实践研究还比较匮乏,有待进一步深入探讨。
随着人工智能技术的不断发展和普及,智能评阅辅助大学英语写作教学已成为一种新的趋势。
通过智能评阅系统的辅助,可以更好地帮助学生提高写作能力,培养批判性思维和创造性思维,提升学生的学术写作水平。
开展智能评阅辅助大学英语写作教学实践研究,对于提高学生的写作水平和促进教学改革具有积极的意义。
1.2 研究目的研究目的是通过实践探索智能评阅辅助大学英语写作教学的有效性,深入了解智能评阅技术在提高学生写作水平和教学效果方面的作用,为大学英语写作教学改进提供参考和借鉴。
具体包括:1. 探索智能评阅技术在大学英语写作教学中的具体应用方式,了解其对学生写作水平的促进作用;2. 分析智能评阅在教学过程中可能出现的问题与挑战,探讨如何优化教学实践以提升教学效果;3. 提出进一步改进智能评阅技术应用的建议,为未来研究提供方向,推动大学英语写作教学的创新和发展。
基于英语写作自动评价系统的评价模式在低水平学生英语写作中的实证研究
校园英语 / 基于英语写作自动评价系统的评价模式在低水平学生英语写作中的实证研究海南医学院大学外语部/王康妮 曾美婷【摘要】本研究分别将基于写作自动评价系统的评价模式、基于写作自动评价系统的评价与教师评价的混合评价模式和基于写作自动评价系统的评价与同伴互评混合评价模式应用于低水平学生英语写作中。
结果显示,三个班学生的作文成绩都有明显提高,但是三个班的进步值不存在显著差异,这说明基于写作自动评价系统的评价模式能促进低年级学生的作文水平。
【关键词】英语写作自动评价系统 低水平学生 人工评价一、研究背景在我国现阶段的大学英语写作教学中,因为教师教学科研任务重,每次批改作文需要很长的时间,因而无法及时给学生提供反馈,从而使部分学生对写作产生消极态度,同时,这也导致教师少布置作文,学生没得到足够写作训练。
学生的消极态度和写作训练的不足极大影响了学生写作水平的提高。
大学英语教学积极响应《大学英语课程教学要求》中提倡应用现代信息技术,特别是网络技术为支撑,旨在让教与学不受时间和地点的限制,朝着个性化和自主学习的方向发展的教学模式的要求,运用计算机多媒体技术于教学中。
英语写作自动评价系统(以下简称系统),一项基于信息技术的标准化评价工具,也被引入英语写作教学中,成为英语写作改革的一个重要切入点。
自动评价系统能提高批阅速度,及时给学生反馈,让学生得到更多写作训练,进而提高学生的英语写作水平,但其亦有局限性:主要关注作文的形式方面如单词拼写和语法错误等,却甚少关注内容和组织方面。
基于此,部分研究者建议系统评价应与人工评价相结合,使其更好地达到提高学生写作水平的目的。
目前,国内已有部分研究者尝试将基于系统的评价与人工评价的混合评价模式应用于写作课堂中,发现混合评价模式比单独的人工评价更能提高学生写作水平。
然而,鉴于系统评价能够提高学生写作水平,因其局限性,才进而提出系统评价与人工评价相结合的混合评价模式,因此,后续研究应该把基于系统的评价与人工评价混合评价模式和基于系统的评价模式进行比较,但目前却鲜少有这方面的尝试。
写作自动评价系统下的大学英语写作教学模式研究
智库理论智库时代 ·185·写作自动评价系统下的大学英语写作教学模式研究周风燕(中国劳动关系学院,北京 100088)摘要:人工智能引入作文批改,把教师从重复性的浅层纠错中解脱出来,更有时间关注学生作文的内容和结构。
教师在信息技术的大潮中角色不再单一,多元化的角色对教师提出了更高的要求。
关键词:写作;评价;教学;模式中图分类号:H315文献标识码:A文章编号:2096-4609(2019)27-0185-002一、写作自动评价系统发展历史写作自动评价系统(Automated Essay Scoring,AES)被定义为“给作文评价和评分的计算机技术”,其发展大致可分三个阶段:第一阶段是在20 世纪60 年代,美国杜克大学的Page 教授等应美国大学委员会请求研制出Project Essay Grade(PEG),它可以基于一篇文章表面语言特征的分析来评估作文的水平。
第二阶段是在20 世纪90 年代,智能论文评估(Intelligent Essay Assessor,IEA)是美国科罗拉多大学的Landauer 等研发的成果,是一种基于潜在语义分析(Latent SemanticAnalysis)的作文自动评分系统,它包含更多有关词法、句法、语篇内容和结构的元素,分析更加复杂。
第三阶段是在21 世纪初,由以上评分引擎衍生的自动评价系统,强调人机交互评改如My Access!、Criterion、Holt Online Essay Scoring 和Writing Roadmap 等。
在新技术的浪潮中国内在人机交互评改的跟进是比较及时的。
2009 年,浙江大学与杭州增慧网络科技有限公司自主研发了“冰果英语智能作文评价系统”;2011 年6 月,北京辞网科技推出了句酷批改网。
2015年,由北京外国语大学中国外语与教育研究中心梁茂成教授及其研究团队与外语教学与研究出版社一起,设计并开发了iWrite 英语写作教学与评价系统2.0。
写作自动评价系统与大学英语教学的整合性研究-最新教育文档
写作自动评价系统与大学英语教学的整合性研究摘要:写作自动评价系统自开发应用至今,为大规模水平考试的评分和整体评价提高了效率,并促进了中国的大学英语写作教学改革。
随着社会对英语人才写作能力要求的提高,教学主管部门和教师应转变传统理念,使评价系统能与英语教学深度融合,成为教学的有机组成部分。
本文借助部分学者的研究成果,提出了在整合过程中教师身份的转变,即由结果的关注者转变为过程的参与者和应用的研发者,以利于大学英语写作教学的深入变革。
1.引言社会对英语使用者的写作能力要求提高,从各级各类型的考试可窥见一斑,如由中国官方组织举办的全国大学生英语写作大赛,四、六级英语考试,托福考试,雅思考试等。
但是我国的大学英语写作教学一直存在师资力量不足,传统教学模式跟不上时代发展,不能满足学生和社会需求等问题,其根本原因之一在于写作课时不足,教师教科研任务繁重,没时间批改大量作文等。
《大学英语课程教学要求》明确指出,要尽快利用现代化的信息技术改进教学效果,使我国的大学英语教育不再受时间和空间的制约,因此使用信息技术辅助教学,提高教学效率已成为必然。
随着人工智能技术的不断发展,特别是自然语言处理及智能语言辅导系统的开发,写作自动评价系统已经升级,为大学英语写作教学带来了深入研究的契机与理性变革的可能。
2.写作自动评价系统写作自动评价系统是一个“通过计算机程序对书写文章进行评估和打分的过程”(王勃然,2015),即通过计算机帮助诊断作文并给出整体分数和反馈意见。
该系统主要是作为一个评分机制,用于大规模水平考试的作文评分,旨在快速生成基于评估目的的终结性分数,以改善评分员之间的信度,增强评分员之间的一致性。
3.写作自动评价系统的发展阶段写作自动评价系统主要经历了三个历史发展阶段。
第一阶段是上世纪六十年代以PEG为代表的模拟人工评判的初期评价阶段,特点是浅显、易懂和易操作,准确率高,但它忽视作文内容、组织、体裁等方面内容,又受到当时评分机制和计算机普及程度等条件限制,1968年即被搁置下来,直到20世纪末,随着台式机的广泛使用才获得了新发展。
智能评阅辅助大学英语写作教学实践研究
智能评阅辅助大学英语写作教学实践研究随着科技的发展,智能评阅系统在大学英语写作教学中得到了越来越广泛的应用。
智能评阅系统可以帮助教师快速、准确地评估学生的英语写作水平,并为学生提供针对性的反馈和建议。
本文将从实践角度出发,探讨智能评阅辅助大学英语写作教学的研究现状,并对未来的发展方向进行展望。
一、智能评阅系统在大学英语写作教学中的应用情况1.1智能评阅系统的概念及特点智能评阅系统是一种基于人工智能技术的自动评阅系统,能够对学生的英语写作进行自动评分和反馈。
与传统的手工评阅相比,智能评阅系统具有速度快、成本低、评分准确等特点,可以大大提高教学效率。
目前,国内外许多大学已经开始使用各种智能评阅系统来辅助英语写作教学。
这些系统不仅可以评分,还可以检查学生的语法、拼写、逻辑结构等方面,帮助学生提高写作质量。
1.3智能评阅系统的优势和局限性智能评阅系统的优势在于其快捷、准确、客观的评分方式,可以为教师和学生提供客观的评估和指导。
智能评阅系统也存在局限性,例如对于语言的变化和语境的理解能力有限,无法替代人工评阅。
许多大学在英语写作教学中引入智能评阅系统,取得了一定的效果。
通过系统的评分和反馈,学生的写作水平得到了显著提高,教师也能更好地指导学生的写作。
2.2教师在智能评阅系统中的角色在使用智能评阅系统的过程中,教师的角色发生了变化。
教师不再需要花费大量时间在评阅学生作业上,而是可以更多地关注学生的写作技巧和思维能力的培养。
2.3学生对智能评阅系统的反馈学生对智能评阅系统的反馈也是研究的一个重要方面。
一些学生表示智能评阅系统的评分准确、反馈及时,能够帮助他们更好地改进写作;但也有一些学生认为系统的评分过于死板,无法完全理解学生的意图。
3.1探索智能评阅系统与人工评阅的结合方式虽然智能评阅系统有着诸多优势,但它仍然无法取代人工评阅。
未来的研究可以在智能评阅系统与人工评阅相结合的方式上做文章,使两者相互补充,发挥各自的优势。
探析自动作文评价系统对大学生英语写作能力发展的影响
作文自动评价系统对大学生英语写作能力发展的影响分析1.本文概述随着教育技术的飞速发展,自动作文评分作为一种新兴的辅助教学工具,在大学英语写作教学中越来越受到重视。
本文旨在深入探讨论文自动评价系统对大学生英语写作能力发展的影响。
本文将简要介绍论文自动评价系统的定义、原理以及在英语写作教学中的应用背景。
随后,本文将分析自动论文评估系统如何通过即时反馈和个性化学习支持等功能对大学生写作能力的发展产生积极影响。
文章还将探讨该系统在实施过程中可能遇到的挑战,如评估的准确性和学生的接受度,并提出相应的解决方案来解决这些问题。
本文将总结论文自动评价系统在大学英语写作教学中的潜力,并为未来的研究方向提供建议。
论文自动评价系统综述自动化论文评分(AES)是一种基于计算机的评估工具,用于自动对学生论文进行评分。
该系统利用自然语言处理、人工智能和机器学习等技术来实现对论文内容的理解、分析和评估。
论文自动评估系统的主要目的是提供一种高效、客观、一致的论文评分方法,以减少教师的工作量,并立即向学生提供反馈。
自然语言处理(NLP):通过NLP技术,系统能够理解文本内容,包括词汇、语法和句子结构。
这有助于系统识别作文中的语言错误和不清楚的表达。
人工智能(AI):人工智能技术使系统能够模拟人类的评分过程,通过学习大量的评分数据建立评分模型。
机器学习(ML):ML技术使系统能够从过去的评级数据中学习,不断优化评级算法,提高评级的准确性和一致性。
内容相关性和完整性:系统评估文章是否围绕给定的主题以及内容是否完整。
组织结构:系统将分析文章的结构是否清晰,包括开头、中间和结尾的布局。
论文自动评价系统的优点在于其效率、一致性和可扩展性。
它可以快速处理大量的论文,减少评分过程中的主观差异,并向更多的学生提供反馈。
它也有局限性,例如无法完全理解复杂的语言表达、文化背景和写作意图,有时无法提供与人类评分者相同水平的深度和个性化反馈。
论文自动评价系统已在多个国家的教育领域得到广泛应用,尤其是在英语作为第二语言的学习环境中。
智能评阅辅助大学英语写作教学实践研究
智能评阅辅助大学英语写作教学实践研究随着社会的发展和进步,大学英语写作教学已经成为大学教育的核心内容之一。
英语写作能力不仅是英语学习的重要内容,也是提高学生综合素质的重要手段。
传统的英语写作教学方式存在着许多问题,学生的写作水平提高较慢,教师的批改工作繁琐且效率低下。
引入智能评阅技术成为提高英语写作教学效果的关键之一。
本文将从智能评阅辅助大学英语写作教学的意义、应用现状和实践研究等方面展开探讨。
1. 提高教学效率:传统的英语写作教学方式依赖于教师对学生作文的批改,这不仅耗费大量的教师时间和精力,而且很难保证公正性和客观性。
而智能评阅系统可以根据设定的语法、逻辑和词汇等标准来对学生的作文进行评分和评价,大大提高了教学效率。
2. 个性化教学:智能评阅系统可以根据学生的个性化学习需求进行评价和反馈,为学生提供针对性的写作指导和建议,使学生更好地理解自己的不足之处,并且有针对性地进行提高,从而提高学生写作水平。
3. 促进教学革新:引入智能评阅技术可以推动大学英语写作教学方式的改革,打破传统的课堂教学模式,激发学生写作的兴趣,提高学生的学习积极性,促进学生的自主学习和探究精神。
二、智能评阅辅助大学英语写作教学的应用现状目前,国内外的许多大学英语教学已经引入了智能评阅系统,用于学生的写作作业的批改和评价。
一些知名的智能评阅系统包括ETS的e-Rater、Turnitin等,这些系统可以根据语法、逻辑、词汇等语言要素对学生的作文进行综合评价,并给出评分和建议。
通过这些系统,教师可以更加科学地进行教学评价和指导,提高了教学效率和教学质量。
智能评阅系统也存在一些问题和挑战,比如系统的准确性和客观性、对学生个性化学习需求的满足程度等,这些问题需要进一步研究和探讨。
为了更好地探讨智能评阅辅助大学英语写作教学的实践研究,我们进行了相关的调研和实践。
我们选取了一些大学英语写作课程,使用智能评阅系统进行作文批改和评价,观察学生的写作水平和学习效果。
基于在线自动评价系统的大学英语写作教学策略探讨
基于在线自动评价系统的大学英语写作教学策略探讨随着信息技术的不断发展和应用,教学模式和手段也在不断地更新和改进。
在大学英语教学中,写作是一个重要的组成部分,而如何有效地提高学生的写作水平一直是教师们关注的焦点。
近年来,采用在线自动评价系统作为写作教学的辅助工具,已经成为一种新的教学策略。
本文将从在线自动评价系统的特点、应用和效果等方面,探讨基于此系统的大学英语写作教学策略。
一、在线自动评价系统的特点在线自动评价系统是指通过计算机技术对学生的作文进行自动打分和评价的系统。
它的主要特点包括:快捷、准确、客观。
通过在线自动评价系统,老师可以很快地得到学生的作文成绩和评价,避免了传统的手工批改作文所需要的大量时间和精力。
在线自动评价系统采用的评分标准和算法,能够更准确地评价学生的语法、词汇、逻辑和表达等方面,避免了主观评分的不确定性。
由于在线自动评价系统是基于大量的语料库和算法进行评价的,所以评价结果更加客观和公正,可以有效避免带有个人情感和观点的评价。
二、在线自动评价系统在大学英语写作教学中的应用在大学英语写作教学中,通过在线自动评价系统,可以开展以下几种教学活动和实践:第一,通过在线自动评价系统进行作文批改。
教师可以将学生的作文上传到系统中,系统会根据设定的评价标准和算法对作文进行评分,并给出具体的评价意见和建议。
通过这种方式,学生可以及时了解到自己的作文水平和不足之处,有针对性地进行提高和改进。
第二,通过在线自动评价系统进行作文训练。
老师可以设置一些作文训练的题目和要求,学生可以在规定的时间内提交作文到系统中,系统会给出及时的评价和建议,帮助学生不断地提高写作水平。
通过在线自动评价系统进行作文比赛和评选。
老师可以组织一些作文比赛活动,学生可以通过系统提交作文,系统会自动进行评分和排名,最终选出优秀的作品和作者,激励学生的写作积极性和创造性。
基于在线自动评价系统的大学英语写作教学策略具有很大的潜力和发展空间。
- 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。
2016年第9期总第166期No.9. 2016Sum 166佳木斯职业学院学报基于写作自动评价系统的大学英语写作教学实践研究汪 阳 熊松荣 刘 婷(凯里学院 贵州凯里 556011)摘要:我们认为基于写作自动评价系统的大学英语写作教学模式能有效的提高学生英语写作水平。
为了验证这一研究假设,在一学期的实验中以非英语专业大一的四个班级为实验班和对照班,分别采用基于写作自动评价系统的大学英语写作教学模式和传统大学英语写作教学模式进行英语写作教学。
采用SPSS.20对实验数据进行统计分析,后测结果显示第二组实验班的写作水平较控制班有显著提高,另外受试的所有班级的后测水平均较前测有非常显著的增长。
这表明基于写作自动评价系统的大学英语写作教学模式和自动写作平台能有效提高学生的写作水平和促进学生自主学习能力的培养。
关键词:写作自动评价系统;批改网;大学英语写作教学模式;写作水平;自主学习能力中图分类号:H319.3 文献标识码:A 文章编号:2095-9052(2016)0009-000274-03一、引言国家教育部高教司在《大学英语课程教学要求》中明确指出教学目标之一是“充分利用现代信息技术,采用基于计算机和课堂的英语教学模式,改进以教师讲授为主的单一教学模式,使英语的教和学可以在一定程度上不受时间和地点的限制,朝着个性化和自主学习的方向发展”(2007:6)。
《要求》为大学英语教学模式改革明确指明了方向。
英语写作教学作为大学英语教学的一个重要方面和英语语言能力的一个重要组成部分,其重要性不容置疑。
但是,大量的研究结果表明,目前我国大学生的英语写作能力整体水平欠佳。
因此,整合传统教学模式,结合现代信息技术优势创建有利于提高学生写作能力和写作动机的写作教学模式,是当前大学英语写作教学刻不容缓的任务。
近年来,我国大学英语教师及研究者(如刘彬、戈玲玲、李广伟,2012;戈玲玲、李广伟、刘彬,2014;杨晓琼、戴运财,2015;钟彩顺,2015;胡学文,2015等)从不同角度对以语料库、云计算、计算机和网络技术等为依托的英语写作教学模式、写作反馈的有效性、写作教学的方法和效果等进行了积极探讨。
然而,将写作自动评价系统应用于普通地方高校大学英语教学,改革英语写作教学过程、教学模式、反馈手段等的多维度研究却不多。
此项写作教学改革实践在笔者执教的大学进行。
该校是一所新升普通地方高校,第一、二学年度开设《大学英语》课程,每周4学时,每学期64学时;两年共16学分。
由于课时限制和赶超教学进度等原因,写作部分的教学在《大学英语》课堂中经常被压缩。
并且,由于大班教学,教师也很少布置英语写作任务并给出及时的写作反馈。
以上写作教学现状进一步限制了学生英语写作能力的发展和提高。
基于以上考虑,为提高地方高校学生英语写作能力,本研究将目前国内高校普遍采用的写作自动评价系统“句酷批改网”引入英语写作教学实践,改革传统英语写作课堂,希望给英语写作教学带来新的活力。
二、国内外英语写作自动评价系统述评1.英语写作自动评价系统自动评价系统的研究与开发是机辅语言测试走向智能化发展的具体体现。
具体是指利用专业化的计算机程序依据有效性、公正性和可靠性对教学中的作文文本特征进行评估与记分(Chung & Baker,2003)。
目前国外最著名的评价系统包括Criterion(criterion. )、WriteToLearn()以及WritingRoadMap(www. )等。
以上的评价系统虽各有优点,但它们主要是针对英语本族语学习者而设计的,对以英语为外语或二语学习者的英文写作不太适用,这主要是因为“一语和二语学习者的作文在写作过程和写作文本特征方面存在显著差异”(Silva,1993)。
基于以上因素,本研究引入针对非本族英语习得者写作特点而设计的评价系统批改网。
2.批改网的使用情况及写作优势批改网( ) 是北京词网科技有限公司研发的以语料库和云计算技术为基础,通过分析学生作文和标准语料库之间的距离对学生的英语书面作文进行即时评分并提供改善建议和内容分析结果的在线自动作文批改系统,旨在提高老师批改英语作文的工作效率,提高学生的英语写作能力。
作为一种本土化的在线自动作文批改系统,批改网具有使用流程简单、易于学习操作;反馈速度快、反馈维度全,例如可在1.2秒钟批改一篇作文,内容包括评分、评语、挑错、修改建议等。
同时,方便老师与学生使用。
例如,教师功能包括布置新作业、管理作者简介:汪 阳(1977-),女,福建建瓯人,硕士,凯里学院外国语学院副教授,研究方向:语篇语言学和英语教学研究。
基金项目:项目课题:本文系贵州省2015年度高等学校教学内容和课程体系改革项目“基于写作自动评价系统的大学英语写作教学改革及实践”(文件号:黔教高发【2015】337号),贵州省2015年度教育科学规划一般课题“基于大数据的大学生英语写作语篇错误研究”(编号:2015B224)的阶段性成果。
2742016年第9期总第166期No.9. 2016Sum 166语言艺术与体育研究班级、按句点评、作文题库和抄袭检测等;学生功能则包括修改作文、题库练习、自测练习等。
目前全国已有90%的高校在使用批改网。
三、研究方法1.研究内容和假设本研究旨在调查将自动评价系统融入大学英语写作教学后学生写作能力的发展。
从而提出充分利用现代信息技术,特别是以网络技术为支撑,构建新建地方高校新型英语写作教学模式,使大学英语写作教和学朝着个性化和自主学习的方向发展。
我们的研究假设是“基于写作自动评价系统的大学英语写作教学有利于学生英语写作能力的提升”。
为验证这个假设是否成立,本课题采用实验研究的方式进行。
2.研究对象本研究以课题组成员所承担的2015级教育学院小教理、数学科学学院数理本、马克思主义学院思政本和化学学院化学本四个平行班级进行了一个学期的实验教学。
课题组成员对两组实验班级和控制班级的前测成绩进行独立样本t检验。
检验结果显示,两组对象英语写作水平没有显著差异(t=1.426,d f=61,p=.159;t=.357,df=77,p=.722;两组的p值均大于0.05),因此两组样本相关变量可控,符合实验条件(见表1.)。
3.研究实施方案实验教学在2015-2016学年度的第二学期进行,共16教学周。
首先,在批改网上开通个人网站。
为了便于实验的开展,所有课题组成员和参与实验的学生都纳入到笔者的个人网站进行统一管理。
采用对比教学的方法。
实验班级充分利用基于批改网的大学英语写作教学平台系统布置五次作文,每次作文的话题和大学英语每个单元主题相吻合。
教师在每个单元的写作课堂上组织实验班级学生就作文话题进行讨论,以帮助学生具备相应的背景知识进行写作。
而控制班级则采用传统的教学模式,即该校大学英语课堂的一贯做法,教师很少布置英语写作任务并给出及时的写作反馈。
通过一学期的实验,再次运用SPSS.20对实验组和控制组的后测成绩进行数据分析、比对,验证基于批改网的大学英语写作教学模式的有效性。
四、研究结果分析与讨论首先,将整理后的实验组与控制组的后测成绩用SPSS.20开展独立样本t检验,得到两组(实验组1-控制组1,实验组2-控制组2)数据。
然后又将实验组1和实验组2的前后测成绩分别进行比对,得到另外两组数据(实验组1前测-实验组1后测,实验组2前测-实验组2后测)。
最后,将控制组1和控制组2的前后测成绩分别进行比对,得到最后两组数据(控制组1前测-控制组1后测,控制组2前测-控制组2后测)。
接下来一一论述。
1.实验组和控制组后测成绩对比分析与讨论分组统计表显示,实验后两组班级的作文成绩都有大幅度提高。
组1实验班平均分由前测的67.58增长到78.290分,控制班由65.33分增长到76.062分。
组2实验班由72.30分增长到77.620分,控制班由72.95分增长到80.894分。
表1. 分组统计表N Mean Std. Deviation Std. Error Mean组1前测 01313267.5865.335.4596.963.9801.231后测 01313278.29076.0626.06744.49871.0897.7953组2前测 01334672.9572.309.6616.5251.682.962后测 01334680.89477.6205.28385.9125.9198.8717(组1:0=实验组,1=控制组;组2: 1=实验组,0=控制组)表2. 实验组和控制组后测的独立样本检验表Levene’sTest forEquality ofVariancest-test for Equality of MeansF Sig.t dfSig.(2-tailed)MeanDiff.S.E.Diff.95% Confi.Interval of Diff.Lower Upper 组1方差齐性.819.369 1.65961.102 2.22781.3427-.45724.9128方差非齐性 1.65155.288.104 2.22781.3491-.47544.9311组2方差齐性 1.835.180 2.53677.013 3.27441.2911.7034 5.8453方差非齐性 2.58473.269.012 3.27441.2673.7489 5.7999然而,独立样本t检验显示,实验后,组1的实验班和英语写作水平不存在显著差异(t=1.659, df=61,p=.102,即Sig.>. 05),组2的实验班和控制班的英语写作水平存在显著差异(t=2.536,df=77,p=.013,即Sig.<.05),这是因为组 1和组2的任课教师不同。
不同的教学方式、实验班学生对于此项写作教改所持的不同态度都会对实验结果产生一定的影响,从而导致实验效果的差异。
2.实验组前后测成绩对比分析与讨论前面表1的M值(组1:前测=67.58,后测=78.290;组2:前测=72.30,后测=77.620)清晰地呈现了实验前后两个实验班级写作水平的变化情况。
独立样本t检验进一步证实了实验前后两个实验班级的英语写作水平得到了非常显著的提高(组1:t=-7.306, df=60,p=.000,即Sig. <. 01;组2:t=-4.094, df=90,p=.000,即Sig. <.01)。
以上数据证实了基于写作自动评价系统的大学英语写作教学改革及实践能极大程度地提高学生的英语写作水平。
这一方面是因为2752016年第9期总第166期No.9. 2016Sum 166佳木斯职业学院学报实验班老师有意识地增加了英语写作讲授的内容如写作技巧等。