APP下载

一种面向突发事件的文本语料自动标注方法

2017-06-01张雨嘉刘宗田

中文信息学报 2017年2期
关键词:文本

刘 炜,王 旭,张雨嘉,刘宗田

(上海大学 计算机工程与科学学院,上海 200444)

一种面向突发事件的文本语料自动标注方法

刘 炜,王 旭,张雨嘉,刘宗田

(上海大学 计算机工程与科学学院,上海 200444)

事件语料库是研究语义Web中事件知识的抽取、表示、推理和挖掘的基础和关键技术之一。该文以事件作为文本知识单元,在LTP分析的基础上,用序列模式挖掘算法PrefixSpan从现有的小规模语料库中挖掘事件要素的词性规则等,用同义词词林(扩展版)对触发词表进行了扩充,结合自定义的事件要素词典,采用多遍过滤、逐遍完善的思想提出一种针对大规模突发事件语料库构建的自动标注方法,在实验部分不仅与人工标注做了对比,同时与Stanford CoreNLP NER进行了对比,实验效果理想。

突发事件;语料库;自动标注

1 引言

当前,国内外各类突发事件频发,反映在互联网上则是各类新闻、社交网站关于突发事件的信息呈现爆发式增长。通过对海量突发事件信息的结构化处理和语义分析实现突发事件的判断和预测具有重要意义。传统的文本分析手段局限于样本数量和定性研究,无法适应大数据时代在内容挖掘上对广度和深度的要求[1]。语料库的分析方法,符合大数据的思维逻辑,通过对海量文本数据的处理,可以对文本内容进行深入挖掘,而不仅仅局限于表层研究或定性分析。通过构建突发事件语料库,可以对突发事件对象进行分析,确定突发事件领域的概念以及概念之间的语义关系,从而可构建针对突发事件的领域本体模型,并进行推理应用。……

登录APP查看全文

猜你喜欢

文本
重点:论述类文本阅读
重点:实用类文本阅读
初中群文阅读的文本选择及组织
作为“文本链”的元电影
在808DA上文本显示的改善
“文化传承与理解”离不开对具体文本的解读与把握
基于doc2vec和TF-IDF的相似文本识别
文本之中·文本之外·文本之上——童话故事《坐井观天》的教学隐喻
从背景出发还是从文本出发
如何快速走进文本