弹性调度系统

会议室:宴会厅2
出品人:汪瑫

当前,越来越多的企业开始大规模运用云原生、微服务等技术,期望获得更高的迭代效率和... 展开 >

专题出品人:汪瑫

百度主任架构师

百度推荐技术架构部主任架构师。毕业于中国科学技术大学,在搜索,推荐,存储系统,云原生架构等方面有丰富的实践经验。2012 年加入百度,在搜索架构团队参与业务架构研发工作,2017 年起转至推荐架构团队,专注于分布式存储、Service Mesh、资源调度等通用基础技术的研发和在搜索&推荐业务中的应用。

地点:宴会厅2

专题:弹性调度系统

当前,越来越多的企业开始大规模运用云原生、微服务等技术,期望获得更高的迭代效率和更低的成本。在此基础上,如何充分发挥云原生架构的优势,构建更加弹性和智能的系统,成为一项新的关键能力。 本专题将重点关注大规模云原生系统的弹性能力建设,以及如何利用弹性能力为业务带来增益,希望通过案例的分享,能够给大家带来一些帮助和启发。

by 邵伟

字节跳动
高级研发工程师

字节内部有丰富多样的在离线业务负载,这些负载的资源使用模式和天级流量分布各不相同,为实现资源利用效率的最大化,架构上常常会采用在离线并池的技术方案;该方案通过调度能力和隔离技术有效支持了在线微服务和批式离线作业并池,提升了站内整体资源利用率。

然而,字节推广搜索等核心在线服务和离线高优训练作业场景中情况会更加复杂,这些业务通常对调度和管控有更精细化的要求,如更强的单机拓扑感知能力、需要使用异构资源、业务负载有多种角色(主从)关系等,为资源利用率提升和并池带来了更大的挑战。

本次分享将重点介绍字节在离线一体化弹性体系建设的实践,基于统一的调度和管控能力,实现拓扑感知的在离线资源并池以及资源利用率的提升。

演讲提纲:

  1. 背景介绍 
    • 字节资源并池现状
    • 基于弹性实现并池的必要性  
    • 基于弹性实现并池的痛点 
  2. 在离线一体化弹性体系
    • 弹性基础能力构建 
    • 在离线弹性资源协同感知 
    • 资源稳定性和性能建设
  3. 案例分析 
    1. 典型在离线工作负载案例概述 
    2. 在离线扩缩流程拆解和介绍 
    3. 效果和收益 
  4. 未来展望

听众收益:

  1. 了解在离线弹性系统设计的异同,以及各自将面临什么样的挑战 
  2. 了解字节在离线统一的弹性调度能力如何构建和落地 
  3. 了解站内场景如何解决弹性资源合理使用的问题
     

by 田政雄

阿里云
高级技术专家

云上资源交付是企业上云的基础,如何买资源,买好的资源,买性价比高的资源是企业上云首先遇到的问题;云上资源利用率提升是企业上云后的重要成本优化方向。阿里云弹性计算(ECS)有着百万级用户,沉淀了不同用户场景下的资源交付弹性调度体系,不管是针对中小用户,还是高并发的弹性用户,不管是阿里云内部的 OnECS 产品,还是阿里云客户,都打造了不同的弹性调度技术,持续提升用户云上资源的资源利用率和性价比。包括从供应侧的动态调配到售卖侧的智能推荐,从资源交付到快速部署;针对运行态的弹性调度,如何解决弹性的风险,比如低流量时资源被回收,流量上涨时扩容扩不出来的问题;如何识别异常流量从而减少用户资源的扩容;弹性资源对客户来说是按需付费,但对资源运营者来说就承担着一定的库存压力,如何从技术视角来解决这个问题?

本次演讲从弹性用户的痛点出发,揭秘了阿里云针对这些痛点问题是如何解决的,以及背后的技术内幕,以及阿里云内外部客户的云上弹性调度的最佳实践。
 
演讲提纲:

  1. 阿里云弹性调度的挑战
    • 阿里云弹性调度规模
    • 高弹性成功率诉求
    • 高弹性效率诉求
    • 高性价比诉求
  2. 阿里云弹性调度的技术内幕
    • 弹性供应:机位规划、服务器动态调配
    • 资源调度:抢占式实例分时复用、性能Bursting、画像调度、异常调度和隔离
    • 智能售卖:事前购买推荐、容量规划、资源预定;事中多购买形态组合;事后候补生产
    • 弹性编排:预测式伸缩能力保障运行态弹性稳定性、资源编排服务助力一站式建站
  3. 资源交付弹性调度最佳实践
    • 高弹性成功率: SAAS客户的弹性调度实践
    • 高弹性效率:serverless容器服务的弹性调度实践
    • 高性价比:流量波动无状态用户低成本调度实践
    • 高资源确定性:SAAS客户的资源确定性调度实践
    • 极速交付部署:钉钉10万台云服务器的快速资源交付实践
  4. 总结

你将获得:

  1. 了解公有云大规模资源交付弹性调度最新技术
  2. 了解不同用户场景下的弹性调度技术以及弹性风险控制
  3. 了解如何使用云来提升资源利用率,降低成本
  4. 了解从资源运营视角,如何来平衡弹性和成本

by 楚振江

百度
搜索推荐架构负责人

在微服务、云原生等新一代技术驱动下,大规模容器在资源效率和整体成本上如何达到最优化,成为一项亟待解决的技术问题。本次分享将介绍百度在容器弹性伸缩中的技术思考、解决方案和应用实践,通过容器与业务数据采集、自动化弹性策略框架、事件驱动机制来构建弹性伸缩系统,探索规模容器的资源效率治理方法。容器弹性伸缩技术已在百度多个主要产品系统中应用,包括搜索、Feed 流、百度 App 和垂类业务产品,支持百万级规模容器的弹性调整。

演讲提纲:

  1. 背景与趋势
    • 微服务与云原生趋势
    • 服务治理与资源成本问题
  2. 弹性机制技术选型
    • 业界技术调研 - 开源与自建如何权衡
    • 实现路径与协作 - 庞大系统与多团队联动
  3. 百度弹性伸缩系统设计
    • 弹性伸缩框架设计 - 设计目标、系统分层和设计原则的考量
    • 弹性伸缩系统组成 - 数据采集模式、自动化弹性策略与事件驱动机制
    • 弹性伸缩进阶策略 – 流量调度/优质容器调度/分时复用等
  4. 业务弹性伸缩应用实践
    • 多级弹性伸缩 - 在落地中探索出满足不同需求场景的多级弹性伸缩
    • 极致弹性 Serverless - 在速度高要求下实现极致弹性的关键问题
    • 弹性伸缩对业务的增益 – 机器成本/资源效率/服务稳定性/业务指标
    • 经验与踩坑 - 落地实践中的经验,好与坏都是积累
  5. 总结与展望
    • 更多业务场景落地
    • 服务治理技术路线

你将获得:

  • 了解百度在弹性伸缩技术的工程实践经验
  • 了解弹性伸缩技术的发展趋势与前景
  • 了解服务治理上更多技术方案尝试与探讨

交通指南

上海宝华万豪酒店

Shanghai Marriott Hotel Parkview
地址:上海市静安区广中西路 333 号
  • 微信咨询

  • 电话咨询

    联系电话:+86 18514549229

微信联系我们

小姐姐 小倩