举重若轻——阿里实时机器学习平台 Porsche 介绍

所属专题:大数据实时流计算与人工智能

嘉宾 : 梁义(毅行) | 阿里巴巴高级搜索研发专家

会议室 : 宴会厅3

讲师介绍

专题演讲嘉宾:梁义(毅行)

阿里巴巴 高级搜索研发专家

梁义,目前就职于阿里巴巴,担任高级搜索研发专家,阿里花名毅行。毕业于浙江大学计算机系,获博士学位。先后就职于 Ask.com 和同花顺财经搜索,长期从事并行计算、搜索、问答、分布式系统、大数据存储和计算等相关工作。2013 年加入阿里巴巴搜索事业部,负责并成功研发面向大规模海量数据的实时处理和在线学习系统 Pora,通过支持实时算法在日常及大促场景中的应用,帮助搜索业务取得了明显的效果提升。2016 年开始推动 Pora 升级成为更加通用的 Porsche 机器学习平台,为整个阿里集团的实时算法应用提供支持。

议题介绍

演讲:举重若轻——阿里实时机器学习平台 Porsche 介绍

机器学习正在众多领域得到广泛的关注和应用。传统的机器学习一般基于离线批处理的方式进行,这种方式由于离线固有的特点而难以捕捉实时的数据变化,容易对最终的算法效果造成影响。为克服此类问题,事实上需要实现一个在线学习系统,能够以最小的端到端延迟,完成每条数据的预处理、特征工程、模型训练及导出等过程,并确保在持续不断的数据压力下保持实时。这样的一套系统其实现和运维难度明显增加,从而限制了在线学习算法的应用和推广。为解决这一问题,我们以高性能的流式计算引擎 Blink 和分布式存储系统 HBase 为核心,设计并实现了一个面向算法人员可视化自助开发运维的机器学习平台 Porsche,大幅降低了在线学习的使用门槛,并在阿里众多业务中得到广泛应用,支持了包括双 11 在内的日常和大促场景。

交通指南

© 2019 Baidu - GS(2018)5572号 - 甲测资字1100930 - 京ICP证030173号 - Data © 长地万方