基于Python的住房公积金舆情信息获取与分析
2021-10-22周福明
科技信息·学术版 2021年12期
关键词:数据采集





摘要:随着网络信息技术的飞速发展,住房公积金咨询和回答已不再仅限于传统的线下进行,更多的人选择在安居客、58同城等房产交易网站提问讨论。为进一步提高公积金中心的服务水平,通过编写Python爬虫代码,获取舆情信息并能通过统计得到舆情分析,并生成可视化图表,发现公积金业务的热点和难点,为住房公积金决策提供依据,为《住房公积金管理条例》修订提供依据。
关键词:网络爬虫;Python;舆情分析;数据采集;可视化分析
0引言
当前,伴随着互联网技术的迅猛发展与网络民意表达的日渐主流化,网络舆情已越来越成为中国社会传递社情民意的一支重要力量。本研究在对安居客中安康公积金网上问答网页进行爬取的基础上,结合Python文本分析,通过分析可以了解民众所关心的安康公积金热点话题,有效监控舆情动态。为安康市住房公积金中心进一步提高服务质量增加有力的帮助。
该方案,不但在获取民意的真实性和广泛性上有优势,而且在新冠疫情时期也是最经济,最快捷和方便的优选方案。然而,一方面,爬取网站制定的反爬虫策略限制用户访问频率,数据获取难度大;另一方面,问答语言具有碎片化、多样性、凝练性等特点[1],增大了情感分析的难度。同时由于我国互联网发展较晚,网络舆情监控方面的研究也较晚,且成果参差不齐[2]。以影响力较大的房产信息网站“安居客”为例,其公积金政策搜索功能有明显缺陷,不能高效的搜索公积金热点问题和解答,并且无法导出问答文本,不支持智能情感分析,用户只能查看该关键词,却无法得知网友的情感动态。……
登录APP查看全文
