使用关键词扩展的新闻文本自动摘要方法*
2016-06-13黄金柱李舟军杨伟铭
李 峰,黄金柱,李舟军,杨伟铭
1.北京航空航天大学计算机学院,北京1001912.中国人民解放军后勤科学研究所,北京1001663.中国人民解放军外国语学院语言工程系,河南洛阳471003
ISSN 1673-9418 CODEN JKYTA8
Journal of Frontiers of Computer Science and Technology 1673-9418/2016/10(03)-0372-09
使用关键词扩展的新闻文本自动摘要方法*
李峰1,2+,黄金柱3,李舟军1,杨伟铭2
1.北京航空航天大学计算机学院,北京100191
2.中国人民解放军后勤科学研究所,北京100166
3.中国人民解放军外国语学院语言工程系,河南洛阳471003
ISSN 1673-9418 CODEN JKYTA8
Journal of Frontiers of Computer Science and Technology 1673-9418/2016/10(03)-0372-09
E-mail: fcst@vip.163.com
http://www.ceaj.org
Tel: +86-10-89056056
* The National Natural Science Foundation of China under Grant Nos. 61170189, 61370126, 61202239 (国家自然科学基金); the National High Technology Research and Development Program of China under Grant No. 2015AA016004 (国家高技术研究发展计划(863计划)); the Fund of the State Key Laboratory of Software Development Environment under Grant No. SKLSDE-2015ZX-16(软件开发环境国家重点实验室探索性自主研究课题基金).
Received 2015-08,Accepted 2015-10.
CNKI网络优先出版: 2015-10-30, http://www.cnki.net/kcms/detail/11.5602.TP.20151030.1605.002.html
Key words: keyword expansion; similar topic text; automatic summarization; graph algorithm; system implementation
摘要:提出了使用关键词扩展的新闻文本自动摘要方法。该方法从大规模的语料中提取与输入文档相近主题的文本组成背景语料,并基于背景语料进行关键词的扩展,强化关键词对文摘句的指示作用,从而提高新闻文本摘要抽取质量。研究和实验表明,该方法在Rouge-1、Rouge-2评测中取得了优于基于关键词、基于TextRank和基于Manifold Ranking方法的结果。在研究中组织制定了100篇新闻文本的4份中文新闻文本标准评价集,研制了基于关键词扩展的中文新闻文本自动摘要系统,开发了面向中文的基于ROUGE原理的新闻文本摘要结果自动评测系统,初步实现了从理论到实践的转化。
关键词:扩展;相近文本;自动摘要;图算法;系统实现
1 研究背景
自2001年美国国家标准技术研究所(National Institute of Standards and Technology,NIST)举办文档理解会议(Document Understanding Conference,DUC)以来,文本自动摘要研究得到了越来越多的关注。对于通用型自动文摘系统而言,Nenkova[1]研究发现,单文档摘要自动生成的难度往往与人们的直觉相反,要难于多文档摘要的自动生成。……