在开源、云、AIGC 等技术的影响下,大数据架构正向现代数据架构演进。这些转变升... 展开 >





负责爱奇艺的商业智能、大数据、个性化推荐和用户增长等部门和方向。在互联网产品设计和研发方面有近二十年经验,曾就职于微软、hulu、雅虎等公司,也曾在国内知名互联网公司负责过创业项目。
在开源、云、AIGC 等技术的影响下,大数据架构正向现代数据架构演进。这些转变升级包括,从传统数仓到云原生数仓,从 Hadoop 到数据湖,从 ETL 到 ELT,从以 IT 为中心的交付到业务自助分析等等。当前敏捷 BI 已经开始成熟,面向业务人员的指标中台正快速发展,DataOps 备受关注,以 GPT 为代表的 AIGC 技术有望提升数据加工、分析效率,降低数据门槛。数据领域开始了新一轮的升级,人人用数据、时时用数据这样的数据平民化时代即将到来。
LLM 的发展,引发新一代的内容理解、生成技术热潮,也使得门槛相对较高的数据研发治理领域,有了更加平民化、提供自然语言接口的可能。
DataLeap 是火山引擎数智平台(VeDI)推出的大数据研发治理套件,核心是帮助企业快速完成数据集成、开发、运维、治理、资产、安全等全套数据中台建设。
演讲提纲:
听众收益点:
随着数据湖相关技术的逐渐成熟、湖仓理论的发展,生产环境落地已经非常广泛。相比较传统数仓在数据更新时效性、查询索引增强等方面有明显优势,在基于云对象存储的存算分离架构下表现更为突出。本次演讲将从作业帮现有架构面对的挑战出发,结合真实的业务场景,阐述相关数据湖仓技术方案和实践经验。
演讲提纲:
听众收益点:
爱奇艺数据中台团队在管理和服务公司内数据资产,实施数据治理的过程中,不断吸收新的理念,引入新的工具,精细化爱奇艺的数据体系管理。
“数据湖”作为近年来数据领域广泛热议的概念,其技术层面也受到了业界的广泛关注。我们的团队对相关数据湖的理论和实践进行了深入研究,认为数据湖不仅是一种集成和处理数据的极具前景的技术,更是一种治理数据的全新视角,可以对数据管理、数据存储、数据链路等治理工作带来显著提升。
演讲提纲:
听众收益点:
随着云原生技术的发展,数据库与大数据行业趋势也有了一些转变。Serverless、全托管,以及自建数据库均有其适用的场景。然而,如何在可控性和成本之间找到平衡、在复杂性和易用性之间找到演进的方法,是亟需关注的问题。DevOps 和云原生带来了新的管理范式,容器化、容器编排、基础架构即代码、声明式 API 等给业界带来了新的启发。将 Kubernetes 作为业务与云的中间适配层,将多种数据库引擎统一管理,做好抽象能够更好的管理好多场景下使用云数据库的复杂度。
本次演讲,会从背景和历史教训出发,基于软件开发的新理念,为大家介绍如何做好多数据库引擎的抽象,如何用领域来封装复杂度、如何用低代码扩展新引擎?我们应该如何理解 HTAP?向量数据库可以被统一管理吗?混合云专有的 DBaaS 如何实现等等。
演讲提纲:
听众收益点:



微信咨询

电话咨询
微信联系我们

