2018年留学备考规划>>点击查看 | ||||
托福 | 雅思 | GRE | GMAT | SAT |
在托福写作备考中,大家既熟悉又陌生的一个名词便是E-rater了,它是参与写作阅卷过程中的一个系统。今天,我们就一起来了解一下“神秘”的E-rater。
01 E-rater是做什么的?
当考生完成托福考试后,作文部分(包括综合写作和独立写作)的分数将由接受过ETS培训的老师和E-rater共同批改(见下面官网截图,截图来源:https://www.ets.org/toefl/ibt/scores/)。在批改过程中,机器和人工独立评分,互相不知道彼此的分数,人和机器的评分范围都是0-5分,最终系统会对这两个分数进行加权平均。值得一提的是,为了保证分数的公平有效,人工给分和机器给分的误差不得超过1分(如人工给出3分,机器给出4分为正常;人工给出2分,机器给出4分则为异常分数);若两者分数误差超过1分,将由ETS的专业阅卷者进行再次评分。
02 E-rater是如何做到准确阅卷的?
E-rater通过计算机数据功能对于考生写作文本的相关信息进行一定的标签匹配,结合ETS的过往的写作数据库来审核考生的写作质量。它利用的是计算机语言学中的自然语言处理(Natural Language Process,简称NLP)方法。其中E-rater最擅长捕捉的是考生的语言使用,E-rater系统将考生考场作文的语言与数据库中不同分数段的文章的语言进行比对,判断考生的写作语言质量;同时,E-rater还可以通过检测逻辑连接词的使用来大致判断考生文章的逻辑衔接情况,通过匹配主题关键词来检测考试的文章发展是否出现跑题。简单来说,像手机软件“唱吧”一样,E-rater就是把考生的作文与数据库里的文章进行比对,从而给出系统判断的分数。
03 E-rater能关注到写作的哪方面?
许多人认为E-rater只能检查语法错误,这样想可就错了。作为ETS开发的几大数据引擎之一,E-rater可以依据托福写作评分标准,审核考生作文的五个方面:Organization & Development(文章组织和发展),Grammar(语法),Usage(用词),Mechanics(格式),Style(语言风格),下图便是E-rater的母引擎Criterion呈现的分析界面:
在上图中,我们可以看到系统将考生的文章进行了不同色块的标注,每个色块代表着文章的不同成分(开头段的黄色表示background information,红色表示thesis statement;中间段蓝色表示topic sentence,绿色表示supporting information;结尾段橙色表示conclusion)
可以详细介绍一下E-rater如何按照托福写作要求进行评分吗?