专题演讲嘉宾:袁庆军

阿里云技术专家

目前负责阿里云 SLS 数据加工服务研发工作,服务阿里集团内部各个团队、以及阿里云上客户的海量日志处理。曾就职于 Splunk (中国),对机器数据处理场景痛点、核心技术和架构有深刻理解。

by 袁庆军

阿里云
技术专家

数据密集型服务有其特定的工作特点,在 K8s 下部署调度需要进行特定的适配,尤其是在运行数十万作业,日处理 PB 级别规模的服务场景时,有许多额外新的挑战。本议题从实际案例出发,针对此类规模场景下系统稳定性建设中遇到的典型问题,比如作业资源上限不可控性、算力扩缩容触发机制不够灵活等,探讨这些问题的根源,以及落地的处理实践。

演讲提纲:

1. 数据密集型服务的架构特点
2. 云原生下数据密集型服务的架构适配
3. 该架构下稳定性常见挑战

  • 作业资源上限不可控性
  • 算力扩缩容触发机制不够灵活
  • 热升级回滚限制
  • 云上多集群运维复杂度
  • 组件兼容性问题
  • 其他问题

4. 对应问题处理方案与实践

  • 动态调节与反压机制
  • 通过自定义扩缩容指标扩展
  • 多集群调度迁移
  • 其他方案策略

5. 未来展望

你将获得:

  • 对数据密集型服务的架构特点,及其在 K8s 下部署适配有完整认识
  • 深入理解云原生下数据密集型服务(如 ETL 系统)稳定性建设的挑战,及其对应处理方案

交通指南

北京·四季酒店

Beijing International Convention Center
地址:北京市朝阳区亮马桥路48号
  • 微信咨询

  • 电话咨询

    联系电话:+86 15600537884

微信联系我们

小姐姐