所谓网络爬虫（又称为网页蜘蛛），是一种按照一定规则，自动地抓取互联网信息的程序与技术。如果通过爬虫抓取网络公开信息，并不违法；但是如果抓取的是未公开、未授权的个人敏感信息，就属于违法行为。
　　北上广深杭是互联网金融产业聚集区，自中秋节以来，前述地区多家大数据公司、爬虫公司、放贷平台被查。继在线信用卡管理平台51信用卡被杭州警方突击调查后，北京金融局10月22日窗口指导摸排区内所有大数据企业是否存在违规爬虫业务，如果没有则要求企业出承诺函，如果存在违规爬虫业务，要上报并尽快整改。
　　10月21日上午10点，在线信用卡管理平台51信用卡（02051.HK）突遭警方介入。据记者从内部人士处了解，此次风波的起因是因外地非法催收等案件的追查，由杭州市公安局统一部署的调查行动（参见“现场目击51信用卡被警方调查 头部平台卷入非法催收案”）。
　　51信用卡这次被查的导火索是非法催收。针对非法催收，最新的司法意见已经形成并开始执行。
　　10月21日晚，最高人民法院、最高人民检察院、公安部、司法部等多部门联合印发《关于办理非法放贷刑事案件若干问题的意见》的通知。通知提出，为强行索要因非法放贷而产生的债务，实施故意杀人、故意伤害、非法拘禁、故意毁坏财物、寻衅滋事等行为，构成犯罪的，应当数罪并罚。纠集、指使、雇佣他人采用滋扰、纠缠、哄闹、聚众造势等手段强行索要债务，尚不单独构成犯罪，但实施非法放贷行为已构成非法经营罪的，应当按照非法经营罪的规定酌情从重处罚。
　　非法催收的背后，更深层的原因是违规收集用户信息。据记者此前了解，这波强监管是由于公安部门打击“套路贷”牵涉出了导流获客和暴力催收这两个帮凶，发现爬虫是主要工具，为这些“套路贷”平台爬取通讯录等个人敏感信息用于放贷以及暴力催收。“套路贷是主犯，爬虫公司是从犯。”有接近公安部门的人士称（参见《周刊》2019年第38期特别报道“爬虫公司被查风暴”）。
　　对于爬虫公司的监管风暴正愈加猛烈。这一波监管风暴今年9月初自杭州开始，迅速了席卷了几乎整个大数据风控服务商，一时风声鹤唳。所谓网络爬虫（又称为网页蜘蛛），是一种按照一定规则，自动地抓取互联网信息的程序与技术。如果通过爬虫抓取网络公开信息，并不违法；但是如果抓取的是未公开、未授权的个人敏感信息，就属于违法行为，违反的是2017年6月1日实施的《网络安全法》以及相关两高司法解释。
　　通常，各种借款APP大多数都是让借款人笼统授权，包括同意提取通讯录、同意把个人信息用于其他第三方商业合作等。“很多老百姓是玩不过这些公司的，稀里糊涂的就去授权了，” 在一位公安部专家看来，提取通讯录就属于侵犯个人信息隐私。2017年6月开始实施的《网络安全法》已明确要求对于信息主体的个人信息不能概括授权、必须明确授权。
　　上周，北京银监局也正式下发文件，规范金融机构和金融科技公司合作，一方面肯定了大数据技术的价值，“充分运用大数据技术，加大风险监测和预警力度”；同时严禁金融机构与以非法手段催收贷款的企业开展合作；严禁与以“大数据”为名窃取、滥用、非法买卖或泄露客户信息的企业开展合作；并再次强调金融机构不得将风控等核心环节外包；不得仅根据合作机构提供的数据或信用评分直接做出授信决策等。
　　前不久，央行下发《个人金融信息（数据）保护试行办法》的征求意见稿，其中包括金融机构不得从非法从事个人征信业务活动的第三方获取个人金融信息；不得以“概括授权”的方式取得信息主体对收集、处理、使用和对外提供个人金融信息的同意。