基于云计算的微博数据挖掘研究综述
2014-12-28贾冲冲王名扬张晓霞东北林业大学信息与计算机工程学院黑龙江哈尔滨150040
安徽农业科学 2014年31期
贾冲冲,王名扬*,郑 丹,张晓霞 (东北林业大学信息与计算机工程学院,黑龙江哈尔滨150040)
云计算和Web 2.0技术的发展带领人们走进了“大数据”时代和社交网络交互时代,新技术催生了微博并使之成为新的信息互动和传播的社会化媒体,网络与用户间的关系已由用户被动接受网络呈现的信息转变为主动参与的模式。用户通过发布内容、参与讨论以及分享转载等行为使互联网呈现出更加主动、丰富的形态。数据的增长海量化、类型多样化、传播即时化以及事件的突发性、影响持久化等诸多表现,从一定程度上影响着社会的稳定和舆论走势[1]。技术在提供便利的同时也考验着人们对海量数据的分析和驾驭能力。如何从时刻变化的海量数据中提取出有价值的信息,同时对消极、负面和虚假的信息进行及时监管,已经成为社会化媒体数据研究的重要问题[2]。而云计算可以为海量数据处理和分析提供高效的计算平台,数据挖掘技术在云计算平台的应用将使得微博成为互联网领域的又一变革力量。
为此,笔者以新浪微博为研究对象,从微博数据的获取,到好友推荐、用户影响力评价、网络舆情监测等实际应用,阐述了如何借助云计算平台对微博产生的大量数据进行挖掘的研究成果。
1 微博数据的获取
微博数据挖掘的前提是数据获取。新浪开放平台为第三方提供了获取微博信息的API接口以及方便微博API调用的支持多种计算机语言的SDK软件开发包,其中封装了从授权认证到数据获取与解析的各项功能,开发者通过申请Accesstoken获得开发者权限,就可编写程序调用API接口获取用户信息和微博内容等数据。……
登录APP查看全文
