限定领域口语对话系统中超出领域话语的对话行为识别
2016-06-01黄沛杰王俊东柯子烜林丕源
中文信息学报 2016年6期
黄沛杰,王俊东,柯子烜,林丕源
(华南农业大学 数学与信息学院,广东 广州 510642)
限定领域口语对话系统中超出领域话语的对话行为识别
黄沛杰,王俊东,柯子烜,林丕源
(华南农业大学 数学与信息学院,广东 广州 510642)
由于领域外话语具有内容短小、表达多样性、开放性及口语化等特点,限定领域口语对话系统中超出领域话语的对话行为识别是一个挑战。该文提出了一种结合外部无标签微博数据的随机森林对话行为识别方法。该文采用的微博数据无需根据应用领域特点专门收集和挑选,又与口语对话同样具有口语化和表达多样性的特点,其训练得到的词向量在超出领域话语出现超出词汇表字词时提供了有效的相似性扩展度量。随机森林模型具有较好的泛化能力,适合训练数据有限的分类任务。中文特定领域的口语对话语料库测试表明,该文提出的超出领域话语的对话行为识别方法取得了优于最大熵、卷积神经网络等短文本分类研究进展中的方法的效果。
对话行为识别;超出领域话语;随机森林;词向量;口语对话系统
1 引言
面向任务(task-oriented)的限定领域对话系统是目前人工智能和自然语言理解领域内的研究热点之一,已广泛应用于信息查询系统[1-5]、导航系统[6-7]、导游系统[8]和导购系统[9]等自然语言智能助理。然而,当使用自然语言对话时,即使用户了解某对话系统的限定领域,用户在对话流程中仍然不可避免会使用一些超出领域(out-of-domain,OOD)话语(utterance),如问候、表态等[10]。……
登录APP查看全文
