基于注意力机制的句子排序方法
2018-04-04栾克鑫杜新凯孙承杰刘秉权王晓龙
中文信息学报 2018年1期
栾克鑫,杜新凯,孙承杰,刘秉权,王晓龙
(1. 哈尔滨工业大学 计算机科学与技术学院,黑龙江 哈尔滨 150000;2. 北京中科汇联科技股份有限公司,北京 100085)
0 引言
语义连贯性是文本可读、准确地表达语义和传递信息的必要条件。文本语义连贯也是读者理解文本的基础。
例“华罗庚教授是一位自学成才的著名的数学家。他14岁开始自学数学,每天坚持自学10小时,从不间断。1932年,22岁的华罗庚应清华大学数学系系主任熊庆来的邀请,到清华大学工作。”
这段话能够明确表达出华罗庚是一名数学家,以及他的早期经历。而语义连贯性差的段落则影响语义表达,影响读者理解。
例“1932年,22岁的华罗庚应清华大学数学系系主任熊庆来的邀请,到清华大学工作。他14岁开始自学数学,每天坚持自学10小时,从不间断。华罗庚教授是一位自学成才的著名的数学家。”
上面的段落语义不连贯,不能很好地表述华罗庚的经历,影响读者理解。
因此,语义连贯性是很多自然语言处理(natural language processing,NLP)任务(如多文档自动文摘[1-3]、答案摘要[4])的核心问题,研究如何保持语义连贯性的方法对NLP具有重要意义。
通常,在一个文本段落中,这种语义的连贯性是通过句子的顺序来保证的,句子之间的关系通过语法特征、语义特征来保证,比如在一个语义连贯的文本中,句子之间通过一些连词(如: 因为……所以……,虽然……但是……等)及句子所表达的语义逻辑,来确定先后顺序。然而,在多文档自动文摘(或者答案摘要任务)中,由于句子都是来自于不同的文本段落,无法利用句子在原文中的位置信息,只能通过语义关系来确定句子顺序。
登录APP查看全文
