基于开放域对话系统的自动化评测方法研究

来源：计算机应用研究杂志2020年第5期北京时间：

作者：王春柳,杨永辉,赖辉源,邓霏,

单位：中国工程物理研究院计算机应用研究所,四川绵阳621000；

摘要：开放域对话系统的研究在近年来取得了很大的进展，然而基于该类系统的自动化评测依然是目前亟待解决的问题。针对目前各类评测方法需要大量标注数据和评测准确率较低等问题，提出了一种利用长短期记忆网络和注意力机制判别问题—回复对是否为真实对话的评测模型。该模型基于连续的对话语料进行建模，解决了目前基于参考回复的评测模型需要大量标注数据的弊端。在Cornell和Reddit数据集上，该模型分别取得了57.2%和71.8%的准确率，与现有几种评测模型相比准确率有明显提升。

关键词：对话系统,开放域,自动化评测,长短期记忆网络,注意力机制,

基金资助：国防基础科研计划重点项目；；