山西省招考中心详解2012网上评卷情况
今年山西省高考将首次实行网上评卷。4月初,省招考中心相关负责人介绍了网上评卷情况
30万张答题卡网络传给评卷老师
今年山西省高考网上评卷的基本工作流程为:对答卷进行扫描,随后进行图像切分、数据分发,如果是选择题,则电脑自动评分,并进行成绩合并、校验、统计,如果是非选择题,则评卷系统会将已扫描答卷的切分图像随机分发到评卷教师的计算机上,独立评阅后给分,然后再由电脑自动进行成绩合并、校验、统计。
“往年考生试卷的保密工作贯穿评卷始终,每天评卷老师都要一摞摞领走试卷,阅评后再交回来。今年30万张答题卡全部通过网络传输,评卷教师看到的只是答卷电子图像,且考生个人信息全部隐藏,答卷和评卷数据的保密性、安全性大大提高。”省招考中心相关负责人说,“这同时省去了传统评卷中合分、移分、复查、校对等环节,而由网上评卷管理系统自动完成,彻底杜绝了这些环节中可能出现的误差。”
同一题目实行双评或多评
实行网上评卷后,答题卡的非选择题部分全部实行双评或多评模式,包括客观性填空题。“目前全国29个实行网上评卷的省份中,清一色实行双评的只有6个省市。”该负责人介绍。
双评,即两位评卷教师对同一题目背对背阅评打分。首先需明确一个概念:双评差值阈限,也被称为误差控制预知。假如设定双评差值阈限为2,两位评卷教师对同一题目评分差值应小于或等于2。
双评结果会出现两种情况:1.两位评卷教师所评分值的差值小于或等于双评差值阈限时,评卷系统自动取平均值作为考生该题的最终得分;2.两位评卷教师所评分数差值大于双评差值阈限时,评卷系统自动将该考生的答卷随机分发给第三位评卷教师进行评阅(简称三评)。
三评后可能出现4种情况:1.三评分数与一个双评分数的差值小于或等于,而与另一个双评分数的差值大于双评差值阈限时,则取差值小的两个分数的平均值作为考生该题得分。比如:假设双评差值阈限为2(以下举例均用此假设),一、二、三评分数分别为3、7、4,则取3、4的平均值作为该题得分。
2.三评分数与双评的两个分数比较,差值都小于或等于双评差值阈限时,取差值最小的两个分数的平均值作为考生该题得分。比如:一、二、三评分数分别为3、6、4,则取3、4的平均值作为该题得分。
3.三评分数与两个双评分数差值相等,且均小于或等于双评差值阈限时,取三个分数中较高的两个分数的平均值作为该题得分。比如:一、二、三评分数分别为3、7、5,则取7、5的平均值作为该题得分。
4.三评分数与两个双评分数相比都大于双评差值阈限时,评卷系统会将该题自动转发给学科仲裁组,由仲裁组专家进行仲裁评分,作为考生该题最终得分。比如:一、二、三评分数分别为3、9、6,则发给仲裁组,由专家进行惟一评分。
“双评或者三评后,出现哪种情况如何处理,完全由电脑程序自动控制。而且,老师是一评、二评还是三评,都不知道。”该负责人表示,最终决定考生分数的两个分数为有效得分,两份评卷为有效评卷,否则为无效评卷。第4种情况中,三位老师的评卷均为无效评卷。“一个教师评卷中多少无效、多少有效、多少通过仲裁,电脑上都有统计显示。”
四类试卷连环检测教师评卷水平
在省招考中心设计的评卷质量控制体系中,还有一个专家评卷部分。
“卷子出来后,不是马上现评。专家们会从中先随机抽取几百份进行阅评,作为样本卷并进行划分:一类作为培训卷——看某道题专家给多少分,自己给多少分,帮助教师掌握评分标准和评分细则。一类作为测试卷——评卷过程中,电脑会随时自动发给教师,在完全不知情的情况下进行阅评,如给出的分数与专家一致,则电脑记录通过;如不一致,电脑会马上提示专家组:第几号教师测试卷不合格,组长就要与该教师约谈。一类作为标准卷——挂在电脑上供老师随时查阅参考,比如某道题专家给多少分,为什么。
此外,还有一种被称为“最残酷”的管理方法——复评卷,即再次评阅同一张卷子。比如,A老师今天上午评了300份试卷,下午电脑可能会把上午评过的卷子发回重评。老师完全不知情。“除非脑子特别好,能记得这份卷子评过,还能记得给了多少分。”该负责人表示,复评卷初步确定比例为1%,即评100份卷子须发回重评1份。
海量评卷信息电脑轻松监控
今年网上评卷还建立有全程实时监控体系,可以对每个评卷教师的评卷情况进行监控,对海量评卷信息进行现代化的、便捷的、科学的管理。
根据教育部要求,主要设有6个评卷质量控制指标体系,比如平均值和平均值曲线,绝对值和绝对值曲线,标准差和标准差曲线等。简单来说,这些统计曲线可以看出几点几分全体评卷教师对某道题的评分分布是什么,甚至某个小组、某个评卷教师的评分分布等。一般同一类型曲线分布应大致相同,如果大组的分布曲线是这样,小组的分布曲线也基本相同,某教师的分布曲线大不同,比如有突然的升降,评卷组长就要找该教师约谈分析。当然,具体问题要具体分析,或许该教师碰到的就是比较特殊的试卷。
此外,“由于每个教师的思维模式不同,考虑问题的角度也不同,所以有些失误也不是人为造成的,比如作文。但其中不能有异常误差和恶性误差。”该负责人表示,异常误差是正常误差预知控制范围的两倍,这种情况下试卷必须接受质检和仲裁。在异常误差中,可能会有一些更为严重的恶性误差,比如非零分试卷老师给评零分,同一篇作文A老师给60分,B老师只给了3分等。