数据存储架构

会议室:百宴厅2

地点:百宴厅2

专题:数据存储架构

by 程力

腾讯云
技术专家

随着云服务基础设施建设的发展,存储计算分离的架构逐渐成为业内趋势,也成为腾讯云主要对外推进的方向。在存算分离的架构下,数据湖建设成为今年腾讯云发力的方向。腾讯云存储 COS 做数据湖数据底座,推出了数据湖三层加速的架构,帮助用户提升腾讯云的使用体验和性能,打造腾讯云原生的数据湖加速方案。、

作为腾讯云 COS 数据湖加速方案的拳头产品,GooseFS 缓存加速器是腾讯云对象存储今年发布的数据湖方案的重头戏,不仅提供了计算端缓存的能力,增强了命名空间、表级别管理缓存、统一文件语义等多种数据湖特性,同时也跟腾讯云 EMR、TKE、EKS 等应用采用云原生的结合方式,从部署、监控、权限等各方面紧密结合。

本次演讲将重点介绍腾讯云对象存储 COS 的三层加速方案中的 GooseFS 产品,通过实际案例和架构分析等方面透视腾讯云的整体数据湖技术发展和演进方向,结合大数据、AI、训练等核心场景,展望未来腾讯云的数据湖整体计划。

演讲提纲:

1. 腾讯云存储存储计算分离架构

2. 腾讯云数据湖发展方向

3. 腾讯云对象存储 COS 的三层加速方案

4. GooseFS 数据湖加速器介绍

5. 腾讯云数据湖未来展望

by 毛琦

小红书
基础架构部门存储Leader

小红书面对业务的快速增长,在线存储面临着成本和性能的巨大挑战,因此我们自研了自己的 KV 系统. 方案的主要亮点有:HA 的优化; 针对业务场景的诸多实践; 新的数据迁移架构; 异地容灾方案。

你将获得:

  • 小红书的 KV 发展历程
  • 小红书的 KV 架构以及设计目标
  • 内部的应用以及存储实践
  • KV 跨地域容灾架构

by 刘韩松(庐轩)

阿里巴巴
高级无线技术专家

移动端存储技术是存储技术领域的一个子集,因为其使用形态、性能要求、存储介质有限擦写次数等方面的特点,使得存储介质、文件系统、存储模型等方面也逐渐演进出移动端存储技术的特色。本演讲首先介绍手淘基于自研时序块存储内核进行的一些新实践和效果,随后结合对文件系统、存储介质的分析给出更深层次的原理分析,并在最后详细介绍时序块存储内核的设计细节。

演讲提纲:

1. IO 加速:厂商、文件系统、理论界的视角

  • 从文件系统分析读写放大问题
  • Flash存储介质的原理分析
  • 存储模型的读写放大分析及理论界的新方向

2. 手淘时序块存储模型为移动端存储加速

  • WAL的设计
  • 事务的支持
  • 稀疏文件的的使用
  • Beringei内存压缩算法
  • 时序存储模型在手淘端计算上的应用
  • 时序存储模型优化手淘图片体验

3. 关系存储内核的优化

  • 连接池的设计
  • 基于关系数据的全文检索优化

你将获得:

  • 移动端文件系统、存储介质的基础知识
  • 移动端前沿的存储模型设计
  • 读写放大问题的产生原理以及存储模型层的优化

交通指南

上海宝华万豪酒店

Shanghai Marriott Hotel Parkview
地址:上海市静安区广中西路 333 号
  • 微信咨询

  • 电话咨询

    联系电话:+86 18514549229

微信联系我们

小姐姐 小倩