-
题名英语口语机器评分和人工评分的对比研究
被引量：9
- 1
-
-
作者
孙海洋
张敏
-
机构
中国科学院大学外语系
-
出处
《外语研究》
CSSCI
北大核心
2020年第4期57-62,105,112,共8页
-
基金
国家教育考试科研规划项目“口语考试的计算机自动评分研究”(编号:GJK2017039)的阶段性成果。
-
文摘
本研究对比了讯飞口语自动评分系统和人工评分员对206名学生的朗读、复述和口头作文三类口试任务录音的评分结果,发现机器对朗读的评分偏高,对复述的评分偏低,评分结果与人评结果的一致率和一致性较低,机器对这两类任务的评分存在显著的偏差;机器对口头作文的评分与人工评分比较接近,两者的一致率和一致性均较好;机评和人评的内部一致性均比较稳定,但机评与人评以及人工评分员之间的严厉度均有显著的差异。这些结果可以对口语自动评分算法和技术的优化和完善提供参考,也对现有的评分模式具有一定的启发。
-
关键词
口语测试
自动评分
人工评分
评分一致率
评分一致性
-
Keywords
speaking test
automatic rating
human rating
percentage agreement of rating
rating consistency
-
分类号
H319
[语言文字—英语]
-
