冉朝霞

（中共郑州市委党校 公共管理教研部，河南 郑州 450042）

当前，社会舆情的收集、研判和处置均存在信息不全面、不真实，反应迟缓，处置技术手段落后，研判能力较弱等问题，各级政府应全面、及时监控信息，提升舆情预警智能化水平、舆情分析研判水平，增强舆情处置引导能力，及早对可能产生的现实危机的走向、规模进行判断，搭建起高效的社会舆情大数据平台，提高数据挖掘质量，建立健全舆情管理体制，正确引导社会舆论和网民理性表达，掌握工作主动权，促进各项工作正常有序开展。

一、技术引领，积极创新社会舆情的收集机制

舆情信息的收集工作是社会舆情治理工作的基础和社会舆情研判工作的前提。大数据时代，社会舆情加速生成，传播速度加快，但由于采集平台技术的限制，制约了客观、真实、全面的舆情信息采集，增加了社会舆情的收集难度。突发事件具有隐蔽性、突发性，前期信息收集面临诸多困难，真实有效的数据信息隐藏在海量舆情数据中，只有深度挖掘热点话题、及时跟进热点动态，积极创新社会舆情的收集机制，才能防患于未然，防范和控制危机的出现。社会舆情收集包括数据采集、数据预处理和数据存储三个部分的内容。

1.数据采集是舆情收集的基础。主流的数据采集方式是运用网站应用程序接口（API）技术和Python网络爬虫技术获取舆情信息。API从网站运营商获取舆情数据，利用Python网络爬虫来设定爬行间隔、目标网站以及存储位置，整合各类信息，批量化自动采集网页数据，确保做到互联互通，把种类繁多的数据整合转化为可视化数据。……