论网络舆情监测系统中关键词智能追踪模型的建立
2014-02-25张伟佳丛帅崔巍
计算机光盘软件与应用 2013年23期
关键词:信息
张伟佳 丛帅 崔巍
摘 要:本通过分析舆情信息采集策略,提出智能化的关键词追踪模型,通过关键词智能追踪模型的应用,网络舆情监测系统能及时抓取热点事件的热点关键词,从而实现网络舆情监控系统对热点事件发展趋势的灵敏响应,并为网络舆情热点事件的预警提供数据支持。简单来说关键词智能追踪模型就是以一定的关键词权重算法为基础,依据舆情事件变化速度,通过多次的反复的归纳计算,对之前选取的关键词进行修改、调整和校对的过程。
关键词:网络舆情监测;关键词;智能追踪
中图分类号:TP393.09
1 舆情采集与分析
1.1 信息采集
根据互联网中热点分布特征,在进行信息采集时,系统针对时效性强的主流媒体网站进行信息采集,信息来源可靠性高、实时性好,信息采集量小,分析处理速度快,热点分析速度快、准确率高,预警及时。合理利用主流媒体网站的搜索引擎,进行基于主题的信息采集。由于这些网站的分词技术参差不齐,为了保证信息采集的准确性和实时性,采用了二次搜索的方案。在基于主题的信息采集之前,对要采集的主题进行分词,根据分词的结果,先按照“大范围”的关键词进行采集并存储,对采集的结果再按照“小范围”的关键词进一步搜索,这样采集的信息准确率高。
1.2 信息预处理
网页上面除了系统所需要的舆情信息之外还包括很多其他信息,如:Flash、视频、图片、广告和冗余链接等。在过滤掉这些垃圾信息之后,还需要对相同话题的舆情信息进行话题合并,也就是去重。……
登录APP查看全文