网络爬虫，一个似乎很熟悉但是又有些陌生的名字。

尽管大部分人没有见过网络爬虫的真面目，但是或多或少会听说过，例如小说盗版的网络随机抓取、网络视频被爬取剽窃、文章报道被抓取使用等。

那么，究竟什么是网络爬虫？面对利用网络爬虫进行违法犯罪的行为， 我国刑法又有那些法律规制呢？

网络爬虫又被叫做“网络蜘蛛”，是一种网络技术。该技术可以自动获取网页信息，并根据指令获取专门的信息内容， 是自动化编程程序。

采用通俗易懂的话来说，可以把网络爬虫看作在网线上爬来爬去的小蚂蚁。这些小蚂蚁有自己的主人，也经过训练，可以沿着网线把主人想要得到的信息搬运回家中。

在大数据环境下，网络爬虫技术被广泛应用于互联网中的数据采集和信息整合中。许多平台也利用此技术进行数据深度挖掘，进行大数据分析，以提高服务质量和增加客户粘度。

技术本身没有好坏之分，但是除了对网络爬虫技术的正常使用外， 也会有人利用网络爬虫非法获取数据信息，进行违法犯罪活动。

（1）案例概述：全国首例网络爬虫犯罪案

上海晟品网络科技有限公司是一家经营互联网科技领域业务的有限责任公司，张某是其法定代表人，宋某是其首席执行官（CEO），侯某是其首席技术官（CTO），郭某是公司职员。

从2016年到2017年，该公司侯某指使郭某破解北京字节跳动有限公司的反网络爬取技术，用技术手段抓取字节跳动公司服务器中的视频数据 。北京字节跳动有限公司因此损失技术服务费2万元。

北京字节跳动有限公司报案后，公安机关展开调查，抓捕了涉事人员，检察机关提起公诉，法院审判认为张某、宋某、郭某、侯某犯了非法获取计算机信息系统数据罪，判处被告人员有期徒刑和罚金。被告单位也被判处罚金20万元。

（2）法律分析

我国刑法规定，除侵入国家事务、国防建设、尖端科学技术侵入计算机信息系统或者采用其他技术手段，获取该计算机信息系统中存储、处理或者传输数据，情节严重，构成非法获取计算机信息系统数据罪。

这里的计算机信息技术系统不包括有关国家事务、国防建设、尖端科学技术领域的计算机信息系统。

情节严重的，处三年以下有期徒刑或者拘役，并处或者单处罚金； 情节特别严重的，处三年以上七年以下有期徒刑，并处罚金。

如果获取获取支付结算、证券交易、期货交易等网络金融服务的身份认证信息十组以上，或者获取其他身份认证信息五百组以上，或者违法所得五千元以上或者造成经济损失一万元以上，都会构成“情节严重”，会被追究刑事责任。

在此案件中，张某等人非法获取字节跳动公司的视频数据，在字节跳动公司安装了反爬技术后仍然继续侵入，造成字节跳动公司损失两万元，已经构成严重情节，最终获罪入刑。

可见，合法运用爬虫技术是关键，如果非法使用， 侵害了他人的权益和网络数据安全，很有可能会面临刑事的惩罚。

除了非法侵入计算机信息系统犯罪，如果用网络爬虫非法爬取公民的个人信息，还可能构成侵犯公民个人信息罪。

如果利用网络爬虫在网上散布恐怖、暴力或者淫秽色情内容，还可能会触犯故意传播恐怖信息罪、传播淫秽色情罪等。

（1）客观上有非法爬取行为

在网站经营者中，不乏有彼此之间达成合作意向，允许合作者用爬虫技术爬取网站上的信息。

这种行为只要不违反法律强制性规定，当然是合法的。只有没有经过授权就爬取或者经过授权但是超过授权允许爬取的信息时， 就属于违法行为。

比如有些时候，网络爬取者明知要爬取的网站不可能授权爬取， 但是仍然趁其不备偷偷爬取网站的数据， 这就是违法的。

一般来说，网站经营者上面的信息可以给网站带来一定的流量，从而带来经济效益。偷偷爬取网站数据的人仅仅花费技术成本，就可以把其他网站的数据拿过来发布在自己的网站上，会分走正版网站的流量， 属于是损人利己的行为了。

还有一种现象，就是超越了授权权限。在授权时，网站经营者往往会说明允许爬取什么类型、什么级别的数据。

在进行技术操作时，如果无视约定，趁着便利获取更多的数据信息，甚至抓取网站不愿外露的信息，不仅属于违约，还很可能构成刑事犯罪。

当然，在网络上也有一部分信息，属于公开信息，是在公用领域的信息，如果网络爬虫爬取这一部分信息， 有其合理性，不构成非法爬取。

（2）主观上带有恶意

所谓恶意，是指明知或故意地违法。

例如，在进行网络爬虫抓取时，公然违反计算机网络协议、违反法律法规，或者在明明网站对自己采用了保护性措施的情况下，运用网络技术攻击破解反爬取技术，进入网站进行爬取，这些属于恶意的网络爬虫。

除了看被攻击对象外，如果网络爬虫技术本身就带着破解防火墙的程序，或者带有屏蔽性保障， 可以让自己“隐身”的代码时，也可以认为是恶意的。

判断行为人主观上是否有恶意，同样需要看客观手段，这是因为人心不可察， 在有些时候，网络代码要比人本身要诚实。

恶意的网络爬虫会导致网络空间被挤占，占用网站的流量，可能会引起网站的崩溃，严重的情况下，就会触犯刑法。

网络爬虫是一项中立的技术，只有对其进行法律的规范， 才不至于让很多个人或企业闻网络爬虫而色变。