Sea-Patient-1804 | 1 points | Jan 25 2022 12:23:01

网络爬虫包含爬取工具和“反反爬措施”，容易引起多方面的法律风险。网络爬虫的法律治理跨越多个法律部门，在民事与刑事法律责任之外，行政规制亦不可少。依据现有法律规定，对爬虫的行政规制可以从以下几方面着手：通过行政立法明确规制立场及爬虫的具体合法性边界；平衡刑事处罚与行政处罚的运用；以制定技术标准等多种手段引导爬虫技术的合理利用；提升公共数据与智慧公共服务的供给能力以减少数据爬取压力。行政规制所包含的立体化治理能力对于网络爬虫的法律治理可以起到不可替代的作用。

[关键词]：网络爬虫；个人信息保护；网络安全；数据安全

前言

网络信息的搜集与利用已经成为信息时代最基本的日常活动之一，几乎所有网络用户都直接或间接利用过网络爬虫所提供的信息资源。最初，网络爬虫活动以各种搜索引擎及针对全网信息的通用爬虫为主，但随着第三方库的发达和Python、JavaScript等计算机程序语言的流行，搜索引擎以外针对特定主题信息的各种聚焦爬虫活动迅速增长。爬虫在搜索引擎、舆情分析、大数据挖掘、违法行为监测、犯罪预测、暗网探知等领域所发挥的积极作用已受到法学界的关注和肯定，甚至直接为政府文件所支持；与此同时，爬虫的负面影响亦逐渐凸显。一方面，爬取工具的滥用可能导致被爬网站过载乃至瘫痪，进而削弱普通人对网站资源的使用能力；另一方面，在突破反爬机制后，爬虫所取得的数据有可能大规模侵犯商业秘密、个人信息或个人隐私等权益，非法侵入内网获取政府工作秘密，或者逃避支付利用网站资源的对价，还可能利用未经同意而爬取的数据进行不正当竞争、助力违法放贷和催收活动等等。不仅如此，爬虫的滥用还造成了影响深远的流量黑灰产及数据污染问题，容易使正常的用户访问和操作数据被污染，从而失去其作为大数据应有的价值。此外，恶意利用爬虫干扰正常市场秩序的活动已屡见不鲜，如部分所谓“机票代理公司”利用爬虫抢占航空公司通过官网放出的低价票，并反复订票、退订，直至将票加价卖出，从而掠夺正常客户获得特价票的机会。随着爬虫相关风险的不断增长，对爬虫的法律规制亦随之日显必要；《个人信息保护法》《数据安全法》等重要法律的制定，更是不仅凸显了规制爬取个人信息等爬虫活动的迫切性，也为规制爬虫提供了更充分的制度支持。

当前，对爬虫的法律研究及相关法律实践主要集中于民法和刑法领域，然而来自行政法的理论关注与规制安排亦具有不可忽视的重要性。在全球范围内的网络治理与网络风险规制中，大量行政规制措施的组合运用，对于维持良好市场竞争秩序、保护企业与公民合法权益直至国家战略利益已经起到不可替代的作用。新近制定的《个人信息保护法》及《数据安全法》中与行政规制相关的条款并不鲜见，这意味着未来我国数据利用活动的法治化进程必然与行政规制密不可分。对此，根据爬虫活动的基本原理和技术特点，基于法律规范的有效授权，对网络爬虫的风险进行全面而精准的行政规制，将是网络爬虫治理的关键任务。