互联网数据爬虫之

所属专题:互联网金融(FinTech)

嘉宾 : 张俊九 | 魔蝎科技联合创始人 & COO

会议室 : 宴会厅3

讲师介绍

专题演讲嘉宾:张俊九

魔蝎科技 联合创始人 & COO

2006 年毕业于南京邮电大学通信与信息系统专业,硕士研究生。2006-2011 年就职于摩托罗拉(中国)技术有限公司杭州分公司,主要从事 TETRA(集群无线电)核心控制系统 (Zone Controller)的开发和测试工作。

2011-2016 年就职于中国电信天翼电子商务有限公司,历任信息技术部总监,风险管理部副总经理,研发中心总经理,信息技术部副总经理,专注于解决第三方支付平台业务架构、技术架构的更新迭代和支付风险管理等技术难题和挑战。

2016 年 3 月,与前 51 信用卡管家 CTO 周江翔共同创建魔蝎科技,专注于提供用户授权的数据采集工具服务。公司创立 1 年多的时间,已经服务于 400 多家客户,涵盖银行、消金、互金、大数据风控等各类公司。目前已经成为国内最大的授权采集数据服务提供商。

议题介绍

演讲:互联网数据爬虫之

在过去的两年中,互联网金融和大数据风控行业蓬勃发展,催生了大量的网贷平台,他们依赖海量互联网数据进行信用风险评估,向客户提供普惠金融服务,这也催生了大量的数据服务企业。其中,在用户授权的情况下,利用爬虫技术采集用户信息的数据服务企业在整个生态链中扮演了重要的角色。数据爬虫技术面临的主要挑战是登录验证环节的反爬,以及爬取效率的提升。本演讲主要分享魔蝎科技在爬虫微服务框架、应对反爬策略、自动化运营和海量数据加工等方面的一些探索和实践。

交通指南

© 2020 Baidu - GS(2019)5218号 - 甲测资字1100930 - 京ICP证030173号 - Data © 长地万方