字节跳动基于 Flink 批流一体架构的全域数据集成服务

所属专题:现代数据架构

嘉宾 : 罗齐 | 字节跳动大数据平台高级工程师

讲师介绍

专题演讲嘉宾:罗齐

字节跳动大数据平台高级工程师

罗齐,现任字节跳动大数据平台高级工程师,数据平台全域数据集成服务负责人,支撑公司各业务线的数据集成业务。曾任职于亚马逊全球供应链部门负责数据平台开发。在大规模数据分布式计算以及数据集成领域有较为丰富的经验,致力于打造可靠易用的数据集成服务。

议题介绍

演讲:字节跳动基于 Flink 批流一体架构的全域数据集成服务

全域数据集成是数据中台建设的基石,在数据源种类繁多、数据量庞大、实时性和稳定性要求高的场景下会带来很大挑战。本次演讲主要分享字节跳动全域数据集成服务在每日数万个任务和数十万亿级别数据量的场景下,如何基于统一的技术栈来解决这些问题。内容包括基于 Flink 批流一体的数据集成架构,离线/实时/增量各类数据传输场景下的混合技术模型,高性能和高可用要求带来的问题和解决方案等。 

内容大纲

  • 字节跳动数据集成场景中的挑战;
  • 全域数据集成服务的演进历程;
  • 以 Flink 批流一体为核心的的混合技术架构;
  • 高性能和高可用场景下的解决方案。


听众受益

  • 了解数据集成在字节跳动面临的各种复杂业务场景; 
  • 了解 Flink 批流一体的架构如何解决数据集成领域的各类问题;
  • 了解如何打造高性能和高可用的数据集成服务。 

适合人群

最好对大数据生态,数仓体系或数据中台有基本概念。 

交通指南

© 2020 Baidu - GS(2019)5218号 - 甲测资字1100930 - 京ICP证030173号 - Data © 长地万方
想要批量报名或更多优惠?
立即联系票务小姐姐 Ring
或致电:+86-17310043226