如今，随着大数据及人工智能领域技术的日趋成熟，让机器评判写作和口语技能成为可能，而且这将极大地提高测试的评分效率和反馈质量。人工智能在口语写作的应用中是如何运作的？发展现状如何？如果想了解更多的话就请往下看吧～
阅读时间：4分钟
人工智能正在一步一步进入我们生活的每个角落。师训君发现，在2020年剑桥英语节中，行业最顶尖的学术专家们除了对前沿研究及科技应用的讨论外，更对未来英语教育生态系统进行了展望。具体包括三大板块主题：
英语教育生态系统展望
提升语言测评素养和测评解读
人工智能在测评中的应用
从英语节的主题中，不难看出人工智能正在稳步进军教育行业。他们不仅研究人工智能的评分机制，更是将人工智能引入教育产品中。
听力和阅读作为输入性技能，测试答案相对标准，使用机器改卷已经变得寻常。而写作和口语作为产出性技能，因其答案的多样性和复杂性，在传统考试中均采用人工判卷。
如今，随着大数据及人工智能领域技术的日趋成熟，让机器评判写作和口语技能成为可能，而且这将极大地提高测试的评分效率和反馈质量。目前剑桥大学考评部推出的三款采用了人工智能评分系统的产品，包括AI在线测试产品剑桥领思Linguaskill，口语学习app雅思智学，以及写作学习产品Write & Improve。
接下来，师训君将根据英国文化教育协会东南亚地区测评专家组 Trevor Breakspear先生的演讲，以人工智能口语测评方案有关发音反馈的设计研究为例，带大家稍作了解。
01
在口语测评方面，
人工智能目前能测出什么？
目前，人工智能对于测试者单词发音方面的测试比较到位。机器能够判断测试者的发音是否清晰到位，包括音标是否正确、单词的重音是否正确以及发音错误对（听众）理解的影响。此外，如果测试者的语音能够被清晰识别，那么，包括词汇语法句式在内的口语内容都是可以被机器评判的。
02
在口语测评方面，
人工智能目前测不出什么？
口语真正难以测试的是连读、语调和句子重音方面，这一方面还需要投入更多研究。此外，对于测评逻辑、论据、话题相关性等方面，还有进步空间。
03
为了保证测试评判的严谨，
人工智能是如何被“训练”的？
人工智能产品的开发，需要优秀专业的测评专家与科技公司一起合作。为了保证测试评判的严谨，整个研究流程分为9个步骤：
1. 数据反馈的分析
2. 发音评测标准的设计
3. 人工评测情况
4. 人工评测的信度
5. 人工评测分数与AI评分分数的比较
6. 离群值的研究
7. 用对比的结果向科技方提供模型改进建议
8. 科技合作方利用测评专家建议进行模型修改
9. 将原始测评数据与模型改进后的数据进行对比研究。
（图片来自Trevor Breakspear经理的演讲片段）
值得一提的是，在经过在人工评测环节和人工评测信度的环节之后，考官的评测信度数据将与AI评测数据进行对比，以核验AI测评的可靠性。
（图片来自Trevor Breakspear经理的演讲片段）
在此之后，测评专家会进行离群值研究，找出哪些单词是人工测评和AI测评时差异最大的，并且将数据提供给科技方。在科技方完成模型改进之后，再次进行测试，并对结果进行对比研究。通过不断反馈和技术改进，人工智能测评的准确度会逐步提升，最终应用到产品当中。
（图片来自Trevor Breakspear经理的演讲片段）
04
使用人工智能进行测评，
有什么好处？
进行测评时，不同的考官打分松紧尺度和判断标准不一，且对于不同的考生，不同的考官可能会打出不同的分数。也就是说，存在考官打分信度这一问题。如果使用人工智能，经过深度学习，机器可以在打分信度表现上媲美打分信度最佳的考官。这保证了测试的信度，可以说是达到非常理想的状态。
05
人工智能测评产品，
对教学有什么影响？
使用AI辅助不但能节约老师的时间，还可以让老师的工作变得更轻松。例如，写作老师可以先使用Write & Improve给学生改作文，然后再自行核查一遍。人工智能在词汇语法的修改上目前做得很好，老师在教学中注重引导学生的破题和论点、论据即可。
再如，口语老师如果对于学生的发音感到头疼，可以直接使用雅思智学app给学生们练习纠音。人工智能是最耐心的“老师”，程序里自带了样本答案，学生只需一遍一遍去模仿，人工智能一遍一遍进行打分。口语老师只需定时抽查学生的学习效果，进行一定的辅导即可。
一场突如其来的疫情，打乱了许多行业的工作节奏。在疫情期间，不论是多邻国测试还是剑桥领思，都应运而生，纷纷冒头。人工智能引领的测评模式，似乎比我们想象中来得更快。未来已来，人工智能赋能学习，变成现实！
今天的内容对你是否有帮助呢？欢迎在评论区留言，我们下期见！
,
