随着多家大数据公司或被查、或暂停部分业务，一时间行业风声鹤唳。先有魔蝎科技、新颜科技接连被查，紧接其后公信宝也被贴上封条，聚信立被爆停止对外提供用户授权的运营商爬虫服务。在这场不断扩大的旋涡中，还有更多平台逐渐陷入其中。

　　有报道称，或受此次风波影响，某金融科技应用平台对C端用户的个人征信数据无法使用，更有其深圳分公司员工被带走的传闻。对此，一点资讯金融频道向该平台进行了解，对方回应称没有影响，正常上班。但一“纸”爬虫工程师的招聘，显示背后的事情或许没有那么简单。

　　9月6日，大数据智能风控服务公司魔蝎科技被警方控制，核心高管人员被带走，为合作方提供的服务已经停止，官网也无法登陆。同日，新颜科技CEO黄向前也被警方要求协助调查。自此，正式拉开了“除虫”序幕。

　　随后，聚信立向商户下发通知，停止对外提供用户授权的爬虫服务。聚信立在通知中强调，之所以暂停业务，是“迎合国家日益收紧的监管政策，保证所有商户业务运作的合法合规。”有报道显示，除聚信立之外，还有白骑士、天机、立木等大数据风控公司或主动或被动地纷纷暂停了爬虫服务。

　　9月11日晚上，公信宝运营主体——存信数据已也了封条，封条上印着“古荡派出所封”字样的消息在网上流出。后被证实该消息属实，但查封原因不明。

　　9月16日，网传消息称，杭州大数据公司同盾科技有限公司已解散其爬虫部门，该部门员工集体待岗。随后同盾科技回应称，数聚魔盒为杭州信川科技有限公司独立运营的产品，自2018年开始已逐步调整业务，目前已全部停止相关服务，员工均已调整至其他岗位。

　　与此同时，有消息称某金融科技应用平台数据查询受到影响、个人征信数据被暂停，还传出其深圳分公司员工被带走的传闻。对此，该平台回应一点资讯称自身没有使用爬虫，对其没有影响。

　　如同同盾科技，尽管同盾声称其“不存在爬虫业务，数聚魔盒产品自2018年开始逐步调整业务，目前已全部停止相关服务”，但包括猎聘网的多家招聘网站显示，网盾科技在2019年6月份还发布了招聘爬虫开发工程师的职位需求。

　　与此类似，在拉钩网上可以发现，上述平台2019年8月28日还在招聘爬虫工程师。其职位描述为，负责整个爬虫系统架构和数据存储设计免费代理ip 查找软件 网站，满足互联网金融方向的数据建设需求；爬虫策略和防屏蔽规则，提升网页抓取的效率和质量；各类互联网数据的采集抓取；理解系统数据处理流程以及业务功能需求。

　　不过，当一点资讯就此对该平台进行了解时，对方的回复却“异常凌乱”。给予了三种说辞，先是回应称，“没有干这个的”，“没有招过这个职位”。又称发布该招聘信息乃实习生所为。其后，又给出了第三种说法——与招聘网站是打包合作，招聘网站未经同意擅自发布的招聘信息。

　　有技术方面的业内人士向一点资讯介绍道，一般大数据公司其使用的数据有三方面来源：一是披露文件抓取，比如上市公司给出的报表，包括一些金融企业，如股市，基金公司等，但这些可能需要付费。二是政府数据开放，比如身份证验真等。

　　以上是正规的，还有一些是非正规的。一些企业会因产品或其他方式，获得用户信息。有些企业技术安全不到位，导致用户信息被盗。也有企业内部人员贩卖，根据不同详细度，价格不一样。当然，还有利用软件爬虫抓取门户、权威、专业网站的数据，多为金融、新闻类。该业内人士指出，涉及金融、新闻、媒体、电商等行业使用爬虫技术是比较普遍的现象。

　　资料显示，所谓的网络爬虫，是指平台按照一定规则，自动从互联网上提取网络信息的程序或脚本。有了它，短短数秒之内，就能够有针对性地、将一个人的上网痕迹储存下来。在这之后，针对储存的信息进行分类和分析，效率比起个人的搜索要高得多。

　　此次“虫灾”之所以被引爆，业内普遍认为涉及到了两方面原因：一是侵犯个人隐私。它所爬取到的信息，没有经过被查询者的知情同意，即便被查询者同意了，商业公司对数据的存储、处理、分析，尤其是售卖转移的行为，仍然处于法律的红线上。

　　而是否违法实际很难界定。上述人士表示，目前很难监管，也很难界定，只能单个案例分析。如果是触犯了知识产权，或盗取网站上属于公司私有的数据，会涉及法律。但有些数据是公开的，本就无知识产权或属于免费数据，企业抓取分析形成自己的产品，这些就合法规了。当然如果频繁抓取引起网站瘫痪或影响其他企业正常运营，也是会涉及法律的。

　　而另一个更受到认可的原因，则是为了从“源头”管控现金贷。数据公司利用爬虫爬取到了客户的通讯录，无论客户是否知情同意，催收公司“狂轰乱炸”通讯录的行为显然并不合法。而现金贷行业中的“同业爬虫”等产品，直接将其他现金贷平台的放款额和风控数据爬出来的行为，则容易造成存量用户数据恶性循环。

　　例如，信用管家其主营业务即贷款超市业务，为现金贷产品导流。贷款产品包括同程借钱、洋钱罐借款、360借条、点点贷款、币咚卡贷等小额现金贷，也包括51借钱、秒贷等大额分期产品，51借钱最高借款额度高达10万元。在贷款产品展示页面，充斥着“不上征信”、“无视黑白户”等字眼。

　　而意图招揽爬虫工程师的某金融科技应用平台其部门名为“互联网事业部”，尽管该平台并没有回复我们该部门具体从事何业务，也没有介绍其数据来源。但有业内人士向一点资讯透露该部门主要是做榕树贷款、榕易有钱等项目。

　　其官网资料显示，榕树智慧金融服务平台，由深圳数趣信息科技有限公司和广州数融互联网小额贷款有限公司联合开发并运营。而数融小贷工商资料显示，该公司成立于2017年2月，注册资本1亿元，是上述某金融科技应用平台的全资子公司，经营范围是小额贷款业务以及向中小微企业开展融资咨询服务。

　　早在年初，该平台就曾因旗下榕树贷款导流现金贷年化利息1800%被质疑，彼时其曾回应称已终止与相关公司合作。随后不久，5月16日，平台更名，并上线新产品榕易有钱。无论如何，这与其号称只做大数据风控平台的理念是背道而驰的。

　　19日最新消息，杭州信用管家相关人员也因爬虫业务被警方带走。有知情人士表示：“信用管家是因为爬虫、数据原因被抓。目前不涉及这块（业务）的人已经被放回来了，负责爬虫业务的一个没放。”