银行与大数据公司合作引监管关注 违规爬虫遭围堵

  • 日期:12-20
  • 点击:(550)


原标题:银行与大数据公司的合作让监管者关注被封锁的非法爬虫

华夏时报(chinatimes.net.cn)记者冉东学和徐小媚北京报道

回顾10月份的事件,许多大数据公司的爆炸式“非法爬虫”肯定就在其中 对上官-沈航地区北部的一些大数据公司、爬虫公司和贷款公司进行了调查。

目前,监管层面的监管已经进入银行层面。 银行内部人士透露,该行已收到通知,称监管机构要求该行填写是否与第三方数据公司合作。

该行业的一名高级分析师告诉记者《华夏时报》,大数据公司抓取明确禁止或未经授权的信息是非法的。抓取数据时,将会有一个机器人协议,指定网站中哪些内容不应该被抓取,哪些内容可以被抓取。

大数据公司检查

根据百度百科全书,网络爬虫(也称为网络蜘蛛)是一个程序或脚本,它根据某些规则自动在万维网上抓取信息 其他不寻常的名字包括蚂蚁、自动索引、模拟器或蠕虫。

”一般来说,爬虫的基本操作是模拟人类行为,浏览各种网站,点击按钮,检查数据,或者记住你看到的信息 就像一只虫子在建筑物里不知疲倦地爬行。 “执业医师王春如告诉记者

事实上,爬虫技术通常被拥有相关数据服务的公司使用。 上述内部人士坦率地向记者承认,百度和谷歌搜索最基本的技术是爬虫(crawler),它自动捕捉网页和相关信息,然后进行集成输出。

至于会走多远?“基本上能看见就能抓到 业内分析师还向记者补充说,不展示并不意味着它不存在。用户过去常常保存记录。即使被删除,记录仍可能存储在数据库或服务器中,因此仍有被爬网的可能性,但对爬网程序技术的要求很高。

大约从9月中旬开始,许多大数据公司都遇到了大大小小的事件,主要是由于非法的爬虫业务操作 警方调查了几家大数据公司,高级管理人员被带走,爬虫服务被停止。

9月6日,杭州魔蝎科技的一名关键执行官被警方带走进行调查 同一天,欣彦科技的首席执行官也被警方要求协助调查。 从那以后,许多大数据公司都受到警方的调查,包括红心宝、奇奥聚合、同登科技、莉姆信用调查等。相应的爬行动物业务也被迫关闭。

行业也感觉到了危险,并一个接一个地停止了爬虫服务。 在对魔蝎科技和新颜科技进行调查后,第三方数据服务公司朱新力做出回应,并于2019年9月6日停止提供用户授权的运营商爬虫服务。 爬虫服务平台白骑士和天吉数据也暂停了爬虫服务

值得一提的是,早在2017年下半年,“爬虫”就陷入了舆论漩涡,因为一些大数据公司暴露于非法爬虫窃取现金贷款数据

现金贷款在2017年发展迅速,混乱和越来越多的问题暴露出来。 现金贷款已经成为公众批评和批评的对象。 直到2017年12月1日颁布第141号条例纠正现金贷款,该行业才得以改善。

现金贷款行业的问题之一是一些现金贷款公司开发了“对等爬虫”产品,可以直接抓取其他现金贷款公司的相关数据,包括贷款金额、风力控制等。 因此,现金贷款公司大大降低了贷款成本,并可以通过对等爬虫解决问题,而大数据公司的“爬虫技术”却日益下降。

为了增强竞争力,许多大数据公司玩“边缘球”,甚至不惜违反规定 2017年11月,一篇文章报道称,大数据公司朱利安(Julixin)和魔蝎科技(Magic Scorpio Technology)抓取了现金贷款公司的贷款数据,包括支付宝、微信和其他现金贷款公司。

随后,蝎子科技首席运营官张俊九(Zhang Junjiu)发出内部信函称,在未来2个月内,爬虫业务将逐步关闭,并为签约客户启动补偿机制。 这是对公司非法爬虫问题的认识

为了防止个人信息的泄露,反爬虫技术也应运而生。 然而,上述行业分析师坦率地向我们的记者承认,爬虫、反爬虫、反爬虫,永远是一个相互淘汰的过程。只要爬行数据的好处超过成本,就会有人去做。 因此,反爬虫的关键是加强技术升级,增加爬行数据的成本,同时重点监控爬行数据的对象,必要时诉诸法律

可怕的是,大多数时候,我们甚至不知道谁在抓取数据。

在移动互联网快速发展的时代,数据和流量对互联网公司非常重要。为了一次又一次挑战监管底线,他们最终将受到监管的严厉惩罚。

更严格的监督

监督可能会迟到,但不会缺席

据财新网报道,10月22日,北京市财政局窗口指示磨盘区所有大数据公司是否存在非法爬虫业务。如果没有,公司被要求出具承诺书。如果有任何非法爬虫业务,公司应该报告并尽快纠正。

此外,《21世纪经济先驱报》称,中国人民银行和中国银行业监督管理委员会(China Banking Regulatory Commission)已组成一个调查小组,以找出大数据使用和收集的界限,这将涉及外包收集公司的管理。 第一批调查研究机构包括伊诺银华、万盛金融和Apex

其中,2015年10月,上海一家资产处置公司易诺银华高调上市新三板。在获得上市批准函和国家建设局后,由于政策限制,该公司悄然退出市场。 现在,另一家收藏公司湖南永雄想再次在美国上市。记者们将如何得知结果还不得而知。

相关监管文件集中爆发 一名银行内部人士透露,该行已收到通知,称央行已发出紧急调查,并要求该行填写是否与第三方数据公司合作。 调查涉及数据收集、信用欺诈、信用评分和风险控制建模。央行要求报告第三方数据公司的名称、股东背景以及是否涉及爬虫。

总之,大数据公司将面临严格的监管,用户的个人信息将得到维护。

中国社会科学院金融研究所法律与金融研究室副主任尹振涛在接受记者采访时说,收藏不是小事或新事物。现在《网络安全法》已经发布,《数据安全管理办法》和《个人金融信息(数据)保护试行办法》可能会陆续发布。

《网络安全法》于2017年6月1日正式实施,明确规定任何个人或组织不得从事非法入侵他人网络、干扰他人网络正常功能、窃取网络数据等危害网络安全的活动。禁止提供专门用于网络入侵、干扰正常网络功能和防护措施、窃取网络数据和其他危及网络安全的活动的程序和工具。明知他人从事危害网络安全的活动,不得为其提供技术支持、广告宣传、支付结算等。 网络数据是指通过网络收集、存储、传输、处理和生成的各种电子数据

2019年6月,互联网信息办公室发布的《数据安全管理办法(征求意见稿)》是《网络安全法》的改进。它要求网络运营商在数据收集、处理和使用、安全监督和管理等方面。同时,它对公众关注的问题作出回应,如个人敏感信息的收集方法、准确的广告推送、账户注销困难等。

未来《个人金融信息(数据)保护试行办法》将着力完善征信机制体系,进一步明确金融机构与第三方的征信业务活动,加大对非法采集和使用个人信用信息的处罚力度。

非法爬虫的成本增加,网络数据环境可能得到改善

责任编辑:霍奇