PB级 MPP 数据库 Apache Doris 系统架构解析及实时数据探索

所属专题：大数据实时计算与分析

嘉宾 : 陈明雨 | 百度资深研发工程师

会议室 : 201CD

讲师介绍

专题演讲嘉宾：陈明雨

百度资深研发工程师

陈明雨，百度资深研发工程师，负责 ApacheDoris 以及百度数据仓库 Palo（ Doris 商业版本）的设计研发工作。同时维护 Palo 数仓在百度内部超过千台的部署规模，为超过 200 个业务线提供稳定可靠的数据分析服务。有着六年分布式系统研发的经验，一直专注于分布式可扩展分析型数据库领域，主导参与了 ApacheDoris 从百度开源到进入 Apache 孵化器的全过程，同时也是 ApacheDoris 的 PPMC 成员。

议题介绍

地点：201CD

所属专题：大数据实时计算与分析

演讲：PB级 MPP 数据库 Apache Doris 系统架构解析及实时数据探索

Apache Doris (Incubating)是百度自研分析型数据库 Palo 的开源版本，由 2018 年贡献给 Apache 基金会孵化。目前已在百余家互联网、垂类和传统企业中落地应用。Doris 旨在提供 PB 级数据中的低延迟、交互式数据探索，同时也能够支持高并发在线报表类场景。

本次分享会介绍 Doris 的系统架构和核心功能特点，并结合具体案例为大家介绍 Doris 实践应用。同时介绍 Doris 在接入实时流数据，以及数据更新场景下的最新研发进展，使得 Doris 能够更好的服务于在线实时数据场景。

演讲提纲：

演化之路
- 从百度 Palo 到 Apache Doris的发展历程
- 介绍 Palo/Doris 的设计初衷，迭代过程
系统架构
- 介绍 Doris 的系统架构和重点特性，包括 MPP 查询引擎、物化视图、分布式管理等亮点功能
面向更新场景的解决方案
- 介绍 OLAP 系统在数据实时同步、CDC 场景下的需求和痛点
- 讲解 Doris 针对这些问题所给出的解决方案和技术实现，以及最终如何实现同步 MySQL Binlog 进行实时数据洞察的能力