文雪巍，邢 婷，李 鹏，孙 杰

(黑龙江财经学院 财经信息工程学院,哈尔滨 150025)

自从2020年新型冠状病毒肺炎疫情发生后，人们对疫情情况非常关注。大数据背景下，网络时刻产生海量疫情方面数据，这些数据只有被合理解读与展示，民众才能更好了解真实情况。借助网络爬虫技术和Echarts技术，再通过爬虫从网上获取到每日疫情的各项权威数据，清洗、转化和挖掘后通过Echarts整理成各种可视化统计图[1]，以及每日热点搜图等以多种多样的可视化形式呈现在人们面前。通过疫情可视化页面，使人们能实时快速直观地了解疫情发展情况以及每日疫情感染人数的增长、治愈及死亡情况。全球防疫形势依然非常严峻，对疫情预防和控制仍然是当今全球共同使命[2]。通过可视化系统及时准确评估疫情传播、根据每日疫情数据了解疫情的情况，从而分析疫情发展趋势，这对于政府制定防控措施有着重要意义。因此，文中提出一种基于网络爬行器来监控疫情数据的方法，通过Python爬取疫情数据，显示疫情发生的实时状态，实现数据可视化，让人们看到世界疫情的实时数据以及疫情在中国的状态，以便做好必要的预防。

1 国内外研究现状

1.1 网络数据爬取现状

自20世纪90年代末国外首次开发出有历史记录的网络爬虫以来，爬虫技术成为搜索引擎技术的核心要素之一，近30 a来该技术日趋多样化[3]。各种爬虫系统是由不同的用户需求而开发的，根据实现技术和系统构成可以分为三大类：批量型网络爬虫、增量型网络爬虫和垂直网络爬虫[4]。……