第五届中文语法错误自动诊断大赛(Chinese Grammatical Error Diagnosis,简称 CGED)刚在澳大利亚墨尔本举行。本届CGED评测的参赛者可谓高手如云,团队包括中国社科院、阿里巴巴、北京大学、哈工大讯飞联合实验室(下文简称HFL)等,最终由HFL竞得冠军。
中文语法错误自动诊断大赛官方网页
比赛方式是,主办方挑选了一些外国人写作的中文句子片段,让参赛者通过人工智能算法技术对其中的语法语义错误进行识别并进行系统性能评估。
比赛从四个维度对参赛者的能力进行评估:语病识别(即:识别句子是否有错误)、语病分类(识别具体的错误类型)、语病定位(识别错误的位置和类型)、语病修正(对于缺词和错词,提供修正的建议)。一共有13个团队参加了这项比赛。
在这四项成绩中,哈工大讯飞联合实验室获得了后三项的第一名、以及第一项的第二名,总体排名第一,首次参赛便摘得冠军。
值得一提的是,去年的比赛只有三项成绩,第四项“语病修正”是今年才增加的比赛分项。和去年相比,除了“指出问题”,还提供“解决答案”,其难度更上一级。在“语病修正”的任务中,在“第一候选”或“前三候选”项,HFL分别获得0.1723分和0.2527分,以绝对领先的成绩排第一名。也就是说,在13个参赛团队中,HFL做语法改错题成绩最棒。
在最难的“语病修正”比赛分项中HFL摘获第一名