曾泓竣 曾千容

摘 要：在大数据时代，随着搜索引擎利用的日益常态化，数据爬取也随之迅猛发展，势必由此产生许多法律层面问题。本文将从知识产权保护的角度，对数据爬取衍生出的知识产权问题以及法律适用进行分析。

关键词：数据处理;知识产权;法律适用

中图分类号：D922.294文献标识码：A文章编号：2095-4379-（2019）17-0225-01

作者简介：曾泓竣（1996-），男，广西北海人，广西大学，本科。

一、网络爬虫概念与目前的爬虫规则

网络爬虫，是一种用来自动挖掘互联网信息的网络机器人，其目的一般用于编纂网络索引，也可以用于网络搜索引擎等站点通过爬虫软件更新自身的网站内容或其对其他网站的索引。网络爬虫始于一张被称作种子的统一资源地址（URL）列表。爬虫在执行的过程中复制归档和保存网站上的信息，这些文件通常储存，使他们可以较容易的被查看，阅读和浏览他们存储的网站上并即时更新的信息。

robots.txt是一种ASCII编码的文本文件，通常存放于网页服务器中，它将提示网络爬虫哪些网页不应被抓取，哪些网页可以抓取。但这只是一个约定俗成的规范，并不具有法律效力，并不能保证所有爬虫都准守这一规则。

目前，我国对爬虫技术还没有专门的法律法规加以规定。在通常意义上，爬虫技术只是更快速有效地收集互联网中的内容和信息，因此从技术中立的角度来看，爬虫技术本身并没有存在任何违反现有的法律法规之处。随着大数据产业的快速发展，数据爬取随着各网络主体对资源的争夺而越发激烈。……