李凤霞 李晨曦

摘要： 大数据时代，恶意爬取数据的现象屡见不鲜。这使得网络爬虫行为的规制问题更具研究意义。然而，当前学界对爬虫技术的应用存在一定的认知偏差，并过于夸大了法律规范的社会效果。对此，文章期望通过加强有关法律的体系整合、明确相关监管机构的权限划分、健全国家级数据中心群与数据共享网络、以及加强数据行业协商性“立法”的多元规制方法，促进数据产业的健康发展。

关键词： 大数据; 网络爬虫; 数据爬取行为; 多元规制方法

中图分类号：DF626          文献标识码：A     文章编号：1006-8228（2021）10-11-04

Rational thinking and multiple regulation approaches of Web crawler technology

Li Fengxia， Li Chenxi

（China University of Petroleum， Qingdao， Shandong 266000， China）

Abstract： In the era of big data， malicious crawling of data is common. This makes the regulation of web crawler behavior more meaningful. However， there are some cognitive biases to the application of crawler technology in the current academic circles， and the social effect of legal norms is too exaggerated. Therefore， this paper expects to promote the healthy development of the data industry with the multiple regulation approaches which includes the strengthening the system integration of relevant laws， clarifying the division of authority of relevant regulatory agencies， building a national data center group and data sharing network， and strengthening the negotiated "legislation" in the data industry.

Key words： big data; Web crawler; data crawling behavior; multiple regulation approaches

0 引言

大数据时代的到来使得数据成为企业经营与发展的重要资源，在商业竞争与战略制定中起着愈发关键的作用。与此同时，利用网络爬虫技术恶意爬取数据的行为也屡见不鲜。恶意爬取数据的行为会很可能对网站服务器带来极大的负载容易导致企业服务器的损害，影响企业经营。更有甚者会严重泄漏被爬取企业的信息及商业秘密，极大的影响企业经济效益。

1 数据爬取行为的法律风险分析

网络爬虫技术在司法领域看来最可能存在法律风险的问题——不当获取数据后经过数据处理后又不当使用。仅仅在数据获取流程中有不法行为，只有在危及国家安全和严重侵害个人及企业利益时法律才会出动。这主要存在四种情况。①经营者非法获取涉及国家秘密的有关数据信息，这会构成危害国家安全罪有关的犯罪。②使用数据采集技术给对方的计算机系统造成破坏，譬如恶意爬虫可能会损坏服务器，倘若情节严重，将构成破坏计算机信息系统罪。……