阅卷评分问题

  1. 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
  2. 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
  3. 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。

评分专用页编号:

学员评阅记录:

教员评阅记录:

阅卷评分问题

摘要

本文采用随机分配的方法,建立离差比模型对原始成绩进行标准化,接着对每位评委赋予不同权重,得到论文最终成绩,最后对模型不断优化改进。

针对问题一,根据不重复评阅、各评委和各组合评阅量尽量一致原则,首先采用名额分配方法Hamiltion法分配评委,分别基于随机移位方法和随机组合方法建立随机分配模型,并利用MATLAB软件模拟数据,依据上述三个原则,分析可得随机组合分配模型的可靠性优于随机移位分配模型。

针对问题二,本文首先采用算数均值方法作为最终成绩,但该方法受单一评委的影响大。接着本文建立差比模型,根据不同评委相同1分对总分贡献度不同的思想,得到评委各自的标准化分,然后根据每位评委评阅同一论文与各自标准化分均值的偏离程度赋予不同的权重,进而求得论文的最终成绩。

针对问题三,本文首先对评委整体评阅成绩偏离度进行排序,利用占比的方法赋予其绝对权重,再根据三位评委的绝对权重转化为其实际权重。接着综合考虑评委在整体评阅成绩偏离程度和单一论文偏离程度共同作用的影响,各自权重赋予不同系数,进而求得论文的最终成绩,最后应用实例对模型进行验证。

针对问题四,本文首先对原始分标准化过程进行改进,基于成绩分布接近于正态分布这一思想,将不同评委的分数整体平移到同一水平。再运用问题三模型,求得各自专家的初始权重,综合考虑初始权重和论文赋予的单一权重共同作用的效果,进而求得最终成绩。

本文的特色在于应用实例对模型进行检验,验证模型适用性,更加直观形象。

关键词:随机分配离差比模型综合权重

1 问题的重述

信息化条件下,如何较为客观评价一次考试或者考核成绩成为确定人才培养最终效果的重要依据。很多时候,我们的各项成绩确定往往需要多项指标共同确定,以建模竞赛为例,假设有n篇论文提交,m个阅卷评委,要求每一篇论文需要被多个(以3个为例)阅卷评委审阅打分,现实的情况是,不同的阅卷评委的评分标准不尽相同,有的评委阅卷比较严格,每一分都有自己的想法;也有的评委评分比较随意,所有的分都差不多,等等。

问题一:建立一个合理的分配模型,首先确定每一位阅卷评委的具体阅卷论文是哪些?问题二:建立一个可视化的分数回收模型,实时收集专家打分,如何将三个成绩规范为一个标准分?最后形成每一篇论文的最终成绩。

问题三:在评分过程中,由于不同专家评分特点或是其他原因导致多个(以3个为例)成绩差异较大,此时如何修正模型?

问题四:你有没有更好的评分策略,提出自己的想法并修改模型。比如在问题一中如何人工调控来让误差尽可能减小。

2 模型的假设

(1)假设评委评阅每篇论文时间相同。

(2)假设评委评阅过程中互不干扰。

(3)假设论文成绩服从正态分布。

(4)假设每位评委在评阅过程中标准保持不变。

(5)假设论文编号加密,评委不因学校产生评阅标准偏差。

(6)假设论文评分采用百分制。

3 符号说明

4 问题一模型的建立与求解

4.1问题一的分析

在评阅过程中,假设各评委阅卷速度相等,因此,为保证阅卷总时间达到最小,必须尽量保证各评委的阅卷数量相等或尽量一致,防止出现个人阅卷数过多并且考虑到评阅熟练度,评委最好只评阅单类论文。在分配过程中,必须保证论文不被同一评委评阅

2次,三名评委不能一起搭档评阅过多论文。为简化分析和模型建立,本文假设将论文编码加密,评委无法判断所阅论文是否属于其所在学校论文,首先根据A 、B 、C 、D 论文数量, 将评委按比例随机分配至其中一组,实际中基本很少存在按整数划分评委数量,因此引入常用的名额分配方法Hamiltion 法,即各组取完整数部分后,按小数部分大小,逐个分配剩余评委。方法一,取其中一组分析,将论文随机进行分组,每组论文数量与评委数相等,多余论文先不于考虑,第1轮评阅将每组论文随机分配给评委,第2轮、第3轮在第1轮基础上进行移位再分配,剩余论文考虑方法同理。方法二为更优

模型,首先对评委进行排列组合3A

m C ,再将论文随机分配给每个组合,直至论文分配完毕,尽量保证每个组合的阅卷数量一致。 4.2基于随机分配的模型建立 4.2.1模型的准备

论文总数为n ,评委总数为m , 其中论文存在4个题目类型,根据题目可将论文数分为A n 、B n 、C n 、D n ,分别为A 、B 、C 、D 论文数量,其对应评委数目为A m 、B m 、

C m 、

D m ,其中初步数据为

A A n m n ⎡⎤=⎢⎥⎣⎦,

B B n m n ⎡⎤=⎢⎥⎣⎦,

C C n m n ⎡⎤=⎢⎥⎣⎦

,D D n m n ⎡⎤

=⎢⎥⎣⎦

利用Hamiltion 法,按照各数据小数部分大小,分配剩余评委,

()k k k n n r k A B C D n n ⎡⎤

=-=⎢⎥⎣⎦

,,,

假设A B C D r r r r >>>,即按照A 、B 、C 、D 顺序分配剩余评委,倘若分配到评委即在原有数据上加1,

1()k k n m k A B C D n ⎡⎤

=+=⎢⎥⎣⎦,,,

4.2.2随机移位分配模型的建立

取A 组研究,其中论文数量为A n ,评委数量为A m ,给论文逐个编号,并按照评委数量进行分组,每组论文数量与评委数量相等,每组论文随机生成,其中组数为

A A n z m ⎡⎤=⎢⎥⎣⎦ 每次评阅中,按组将论文分配给评委评阅,论文随机分配至各组,因此不具备特殊性。每篇论文需要被评委评阅3次,因此,z 组论文需要经过3轮评阅,故建立矩阵ij x ,其中i 表示第i 个评委,j 表示第j 组论文,第1轮评阅如图1所示

由于还需要2轮评阅,第2轮、第3轮评阅分别从第1篇论文到第A z m ⋅篇论文循

相关文档
最新文档