现代数据架构

会议室:待定
出品人:堵俊平

海量数据的积累以及云计算的发展对数据中心架构提出了严峻的挑战,对新型数据存储的需... 展开 >

专题出品人:堵俊平

腾讯TEG 数据平台部总监、专家工程师

堵俊平,腾讯大数据海量计算,存储以及数据湖技术负责人,专家研究员,腾讯开源联盟(TOSA)主席,Apache 开源基金会 Member, Apache Hadoop 项目 Committer 和 PMC。

专访堵俊平:《数据湖,大数据的下一个变革!》

专题:现代数据架构

海量数据的积累以及云计算的发展对数据中心架构提出了严峻的挑战,对新型数据存储的需求也持续增强。组织的数据架构越成熟,业务就越成功。在降低成本和提升效率的需求的驱动下,如何进行数据架构变革?在面向云原生,支撑实时 OLAP,以及新硬件技术的驱动下,各个层次的数据存储架构又正在面临哪些变革?本专题将汇集全球前沿技术团队,一起探讨数据架构技术。

by 富羽鹏

Uber
Staff Engineer

如何构建稳定、高效可扩展的实时数据存储与传输平台是 Uber 亟待解决的问题。目前, Uber 部署了全球较大的 Kafka 集群,每天处理 PB 级别的数据,并且对不同的使用场景进行了优化与定制化开发,包括跨地域数据中心的拷贝与容灾、数据集成与联邦、消息重发与死信队列(Dead Letter Queue)等。本次演讲会分享 Kafka 及其生态系统在 Uber 的架构演化以及探讨在实践中遇到的经验与教训。

听众受益

  • 了解 Kafka 在 Uber 这样规模的互联网公司实践中的经验与教训;
  • 学习跨地域 Kafka 集群的设计原理;
  • 了解大规模 Kafka 集群与数据管理的产品设计与新功能介绍;
  • 了解多 Kafka 集群运维的挑战与应对策略。

适合人群

对实时数据平台及 Kafka 感兴趣的技术人员,架构师与产品经理。

by 罗齐

字节跳动
大数据平台高级工程师

全域数据集成是数据中台建设的基石,在数据源种类繁多、数据量庞大、实时性和稳定性要求高的场景下会带来很大挑战。本次演讲主要分享字节跳动全域数据集成服务在每日数万个任务和数十万亿级别数据量的场景下,如何基于统一的技术栈来解决这些问题。内容包括基于 Flink 批流一体的数据集成架构,离线/实时/增量各类数据传输场景下的混合技术模型,高性能和高可用要求带来的问题和解决方案等。 

内容大纲

  • 字节跳动数据集成场景中的挑战;
  • 全域数据集成服务的演进历程;
  • 以 Flink 批流一体为核心的的混合技术架构;
  • 高性能和高可用场景下的解决方案。


听众受益

  • 了解数据集成在字节跳动面临的各种复杂业务场景; 
  • 了解 Flink 批流一体的架构如何解决数据集成领域的各类问题;
  • 了解如何打造高性能和高可用的数据集成服务。 

适合人群

最好对大数据生态,数仓体系或数据中台有基本概念。 

交通指南

© 2020 Baidu - GS(2019)5218号 - 甲测资字1100930 - 京ICP证030173号 - Data © 长地万方
想要批量报名或更多优惠?
立即联系票务小姐姐 Ring
或致电:+86-17310043226