APP下载

基于语义加权的引文网络社区划分研究

2021-04-08刘璐蔡永明

新世纪图书馆 2021年1期
关键词:文本挖掘

刘璐 蔡永明

摘 要 为提高引文网络社区划分的准确性,以文档之间的语义关系以及引文之间的引用关系为基础,结合词汇在文档中的位置关系等信息,构建基于词汇语义加权的引文网络。通过GloVe模型对词汇向量化以充分利用词汇语义信息,结合WMD模型度量文献之间的相似度,把文档相似度的计算转变为在约束条件下求线性规划最优解的问题,结合文本的内容及结构特征对网络中的边进行赋权,以Louvain社区发现算法对加权后的引文网络进行社区划分,并对划分后的社区进行分析与检验,实验证明GloVe-WMD模型可提高引文网络社区划分的准确度。

关键词 引文网络  语义加权  社区划分 文本挖掘 自然语言处理 词嵌入

Abstract To improve the accuracy of citation network community division, citation network with lexical semantic weighting was constructed based on the semantic relationship between documents and the reference relationship between citations and the location relationship of words in documents and other information. The GloVe model was used to vectorize the words in order to make full use of the semantic information of the words. The WMD model was used to measure the similarity between literatures, and the calculation of the similarity of documents was transformed into the problem of finding the optimal solution of linear programming under the constraint condition. The edges in the network were weighted according to the similarity, content and structural features of the text. The citation network was divided into communities by the Louvain community discovery algorithm. The divided community is analyzed and tested. The results show that GloVe-WMD model can improve the accuracy of community division of Citation Network.

Keywords Citation network. Semantic weighting. Community discovery. Text mining. Natural language processing. Word embedding.

0 引言

學术文献是科研领域客观存在的知识载体,而参考文献作为学术文献的重要组成部分,不仅反映了学术研究的背景和依据,而且在知识生产和传播过程发挥着重要的作用。引文网络是文献间引用与被引用关系的集合[1],网络中的节点表示一篇文章,连边则表示文献间的引用关系[2]。随着知识的爆炸增长,引文网络已经形成了一个超大规模的网络系统,对指数级增长的文献,仅凭人力已经无法精确提取出人们所需要的有效信息。如何快速准确地提取出人们所需要的信息是知识管理人员以及相关研究人员需要思考的问题。聚类分析法是信息检索领域的一种重要应用[3],通过对引文网络进行聚类分析可以发现网络中的社区结构,从而揭示学术领域的传承与发展,也能够为学术研究评价提供不同的视角。……

登录APP查看全文

猜你喜欢

文本挖掘
基于贝叶斯分类器的中文垃圾短信辨识
基于潜在特征的汽车评论要素挖掘
基于评论信息的淘宝服装类评分体系优化
数据挖掘技术在电站设备故障分析中的应用
基于LDA模型的95598热点业务工单挖掘分析
文本数据挖掘在电子商务网站个性化推荐中的应用
从《远程教育》35年载文看远程教育研究趋势
基于文献的中西医结合治疗脑梗死药物使用情况分析
基于改进Hadoop云平台的海量文本数据挖掘
慧眼识璞玉,妙手炼浑金