作文机器评卷的到来

作文机器评卷的到来

渐新堂

我们的作文考场阅卷,经历了不少的探索。

为了减少人为因素的影响,在几百上千年的考试中,我们采用了密封阅卷的方式——科举考试中就糊上卷头,还逐步采用另外的人专门进行誊抄,以防笔迹被判阅者认出。

在工业化先行者欧美国家的考试中,采用标准化方式,于1980年代1990年代初进行写作能力的分解考查尝试。给出一个题目。下面列出十多项素材,要求根据题目选出最恰当的三项五项并排好第一第二第三的序列,以考察选材的能力;给出一个短文,列出若干个标题让考生选择,以检查给文章标出合适题目的能力;给出论据,列出若干论点让其选择,看看考生的逻辑思维以及议论的能力……

在我国改革开放之初,高考作文评分也经历了以章熊为首的艰苦探索,提出了内容有偶然性语言表达有稳定特质的观点,坚持进行分解评分,分领域分档次分类别的评分探索。

然而,以上探索在面临巨大规模的高厉害考试中,很难获得理想的成效,不是费时太多成本太高,就是因人为因素包括水平高低情绪波动等而引起分数的客观性差。

上世纪末,美国等教育发达国家开始研究,本世纪初则逐渐投入了写作的机器阅卷。

我国一些教育测评公司于几年前也开始了对作文机器阅卷的持续关注。并发表了一些评介文章。

本世纪初叶,作文机器阅卷是按照标准化思维进行探索设计的。根据美国一些考试中的实践,将机器阅判作文的标准分为三个维度。一是语言维度,即词汇量以及词类的使用量来进行判断,犹如我们电脑八十年代的错误拼写要标注出红颜色一般,属于比较初级的问题。二是逻辑的角度,即各个段落是否围绕一个主题在进行叙述说明论证,是否遵照了同一律不矛盾律等,不要出现偏离与违背自己确定的主要话题。三是潜语义分析,即组织有资质有水平的写作阅卷者上百人(大规模考试)在随机抽样的大样本中选取三五百份考场作文,由这些阅卷者进行或10类或几类的按照平时考场阅卷的标准,由高到低进行分类,装进不同的类别之中去。最后,根据事前的研究与约定,确定好三个维度的不同权重,计算出该文章的最后得分。

但是,中文写作在当时深感有一个大障碍,即在中文写作中,词的连写与切分的瓶颈还没有突破性的进展。

近几年阿尔法狗同世界围棋冠军的挑战,给了研究者们新的启示。

因为智能机器人不是背诵记忆进了若干的棋谱,而是深度学习了天量的世界冠军的下棋案例。既然如此,作文机器评分,为什么不走这样的道路呢,为什么要去研究作文评分标准呢?

台湾师范大学的教授们大胆学习借鉴,用了好几年的时间研发出机器评分工具,并开始使用在台湾三十多万人参与的中考性质的考试之中了,与人工阅卷相比,有极高的相似度。

该软件的基本思路是,只要有当地足够数量的考场阅卷案例让机器人进行深度学习,就能够完全按照已经有的阅卷标准进行准确客观快速的机器阅卷。        平常情况下,语文教师将一大堆作文习惯性地分为好中差三等,机器人则分为从优秀良好中等较差极差五等,其区分鉴别能力提高了三分之二。当然,还有一些附加的直观的加减项目。

据一家语文杂志社的人传,考试中心的人在会议上说,作文机器阅卷在技术上已经非常成熟,不存在任何障碍。只是推出的时间以及舆论准备和中学语文教师的心理接受问题。

这是经不起推敲的说法。

现在的问题要害是学生的书写千差万别,行楷草书以及不规范的字迹,机器如何进行图形识别的问题。尽管一些科技公司在投入巨资力图及早突破,短期内似乎还没有明显的喜人进展。

一些公司也准备今年开始免费在一个省的高考一个地区的中考中进行第三评,将其数据与人工评阅的结果进行比对,逐步推进作文机器评分的实质性落地,逐步在中国实现大规模的作文机器评分。

语音转换、人机对话、智能写屏,也许几年之后也是路径之一。

总之,作文机器评分不可阻挡地正在一步步逼近我们了!

长按或扫描此码方便继续关注

(0)

相关推荐

  • 【高考阅卷】高考考场作文:如何应对评卷老师快速阅卷与深度阅卷

    高考考场作文:如何应对评卷老师快速阅卷与深度阅卷

  • 如果1078万高考考生的未来都拴在AI手上……

    导  读 又是一年高考时,数字化技术飞速发展之际,考场也发生着翻天覆地的变化-- 6月7日凌晨,北京下起了淅淅沥沥的阵雨,算是为几个小时后即将开始的高考奏响了序曲,不知道有多少正在熬夜的"打 ...

  • 昨日记||末考评作文:智伤情伤身也伤

    笔记时间:2020年1月10日 农历:己亥年十二月十六 星期:五 笔记地点:通城县城 作者微信:Yxdniaoer 选自网络 全文4节,约1300字,有删节 预计阅读所需时间4分钟 01 今天改卷.网 ...

  • 又再说作文机器阅卷的讨论 续

    又再说作文机器阅卷的讨论  续 渐新堂 注 没有想到,一些朋友对此话题有兴趣,不断发来了自己的看法.我略去了对话中自己的内容后,再次贴出,供关注作文机器阅卷的人阅读. 尤先生 *我是不担心机器阅卷会成 ...

  • 又再说作文机器阅卷引发出的部分讨论

    又再说作文机器阅卷引发出的三讨论 渐新堂 又再说作文机器阅卷连发三篇短文后,引发了百千万人才.高位编辑及十多年参与高考语文分省命题者的关注,现将昨天与这三人的简短对话讨论贴出来,供有兴趣的朋友思考. ...

  • 又再说作文机器阅卷的两路径

    又再说作文机器阅卷的两大路径 渐新堂 国内现在大约是三家科技公司在进行高考作文机器阅卷的试验,三家公司的阅卷技术以及程序算法等应该还处于保密阶段,根据一些蛛丝马迹的碎片拼接,可以大致知道一些最主要的两 ...

  • 又再说作文机器阅卷答三疑

    又再说作文机器阅卷答三疑 渐新堂 又再说作文机器阅卷后,北京李先生四川尹先生等提出了机器阅卷中的三个问题:准确吗,机器句式识辨过关了吗,会不会形成新八股文? 机器作文阅卷相比之下是准确的.因为人工阅卷 ...

  • 又再说作文机器阅卷

    又再说作文机器阅卷 渐新堂 前几天看到微信上有一则消息,<最新通知:多省高考这对语文主观性命题引入机器阅卷>,感到非常吃惊. 再仔细一看,是"语文匠抖音号"的一则带货广 ...

  • 北京高考语文评卷原负责人:作文最大的问题是不教孩子们说人话,说实话,说真话

    本文作者,漆永祥,如有侵权请联系删除,如果你喜欢"小多少年时"的文章! 关于一线教师对学生写作能力的要求,以及真实的高考阅卷中是如何去判断何为一篇好作文的,北京大学中文系教授.北京 ...

  • 北大教授、高考评卷语文原负责人漆永祥:我对高中语文教学与作文写作的一点看法

    北京大学中文系教授.北京高考评卷语文科目原负责人漆永祥 重视基础与说点人话 --我对高中语文教学与作文写作的一点看法 作者 | 漆永祥 我们希望孩子写什么样的作文 我本科在西北师范大学历史系读书,本科 ...

  • 评卷老师郑重提醒,中高考作文应该这样写!

    一.标题 标题要有魅力,要学会打造有魅力的标题.标题尽量采用观点句. 让人看一眼就知道你是扣话题的.扣材料的:让人看一眼就知道你的观点是正确的:让人看一眼就知道你是深刻的:让人看一眼就知道你是有文采的 ...