个人信息是互联网企业输出用户画像、制定营销策略以及识别风险的重要依据。随着数据产业的不断发展，个人信息已成为高价值的数据资源，对其的争夺日趋激烈。据统计，目前，除了直接通过用户采集数据，另一个主要的数据来源就是使用网络爬虫技术采集公开信息。

所谓网络爬虫，也称网络机器人或网络蜘蛛，是通过模拟人（网络用户）的行为，自动、高效地浏览互联网并抓取所需数据的计算机程序。上海市检察院第二分院第三检察部副主任吴菊萍告诉记者，无论是个人数据还是企业数据，公开信息还是个人隐私或商业机密，爬虫技术都可以实现数据爬取。吴菊萍向记者介绍了爬虫技术如何实现对公民个人信息的侵犯。“在购物、社交、通讯等类型App中，用户可以上传自身信息后设置访问限制，或者使用加密功能只有自己可以访问，这类信息属于用户的个人隐私。如果爬虫控制者绕开上述限制，在未经授权的情况下进行访问，并抓取用户的个人信息，又或者在抓取后公开传播甚至买卖这些信息，造成对用户的损害后果的，可能侵犯相关用户的隐私权。”

笔者梳理了目前存在的5种利用爬虫技术非法爬取公民个人信息形式，包括制作爬虫软件出售给他人使用以牟利；制作爬虫软件供自己爬取公民个人信息；购买爬虫软件使用权供自己爬取公民个人信息；购买爬虫软件使用权爬取公民个人信息出售牟利；任职于使用爬虫软件获取用户信息的平台公司，利用职务便利获取用户个人信息并出售牟利。

“技术是中立的，但技术应用永远不是中立的。”华东政法大学教授张勇在接受本报记者采访时表示，爬虫技术作为一种数据搜集的手段，本身并没有合法与非法之分，但面对互联网上众多的数据，如果不加以限定，任由爬虫随意爬取，势必会对互联网生态造成影响。

首先，无限制的爬虫程序可能对网站服务器造成压力。比如，2018年春运期间，12306（中国铁路网）最高峰时段页面浏览量达813.4亿次，1小时最高点击量59.3亿次，平均每秒164.8万次，其中恶意爬虫访问占据了近90%的流量，给12306的运维造成了很大的负担，极大挤占了普通用户的资源和权益。此外，爬虫程序的更大危害在于，目前不少打着“大数据”旗号的公司，用爬虫程序抓取未公开、未授权的个人敏感信息，甚至违规留存、使用、买卖这些隐私数据，严重扰乱市场经济秩序。