Sunfire-阿里巴巴集团监控平台智能化监控探索和实践

所属专题:AIOps最佳实践

嘉宾 : 王肇刚(梓弋) | 阿里巴巴高级技术专家

讲师介绍

专题演讲嘉宾:王肇刚(梓弋)

阿里巴巴高级技术专家

王肇刚(梓弋),阿里巴巴高级技术专家,阿里巴巴集团监控平台团队(同时也是阿里云混合云监控平台团队)负责人。在智能监控、运维领域工作多年,一直在努力通过产品化、智能化的方式提升监控、运维的效率和能力。

2016年10月份加入阿里,目前负责阿里巴巴集团监控平台的产品研发工作,也同时负责阿里云混合云商业化监控平台的产品研发工作。在加入阿里后,也曾经负责阿里集团全局故障发现及应急响应工作以及阿里巴巴集团变更风险管控工作。在加入阿里巴巴之前,曾在百度负责智能运维产品研发、百度名字服务基础组件研发,以及百度贴吧产品线运维开发工作。

议题介绍

演讲:Sunfire-阿里巴巴集团监控平台智能化监控探索和实践

本次演讲将向大家分享和介绍阿里巴巴集团监控平台的功能和技术架构的演进发展历程,以及在智能监控领域的最新探索和实践。

Sunfire平台作为阿里巴巴集团监控平台,多年以来一直支持和保障着阿里巴巴集团海量技术规模下的业务指标、应用状态及系统资源监控能力,也作为阿里巴巴技术风险体系的前哨和基石,支持了阿里巴巴集团稳定性工作的不断演进。随着阿里集团集群、应用、业务体量的不断扩大,以及集团在稳定性领域的要求不断提升,Sunfire平台也和阿里经济体的技术体系一同成长和演进。在刚刚过去的2020年双11大促中,Sunfire平台再次顺利地支持了阿里集团整体的监控和双11应急指挥体系,并显著提升了核心指标监控的时效性和问题发现效率,也在双11之前的生产突袭演练过程中扮演了重要作用。本次演讲,我们会分享这些业务挑战背后的技术思考和实践。

Sunfire平台也一直保持着在智能监控领域的探索和演进。在已有的智能化时序异常检测算法框架的基础上,为了进一步提升日常及双11大促时的应急故障发现的时效性,我们将时序异常检测算法应用到秒级核心业务指标上,并取得了不错的效果。本次分享将介绍Sunfire平台在秒级业务指标智能监控算法层面的演进和优化。同时,我们也将智能监控的环节从时间序列前置,基于对于应用日志中的错误码的智能监控,我们能够更早更快地发现业务/应用中的错误码异常,也在一定程度上弥补了时序异常检测的监控盲区。本次分享,我们也将分享在错误码异常检测层面的思考和实践。

最后,本次演讲也会分享阿里巴巴集团监控平台在智能监控领域的规划和展望。同时,为了服务更多的云上企业客户,我们也已经将阿里巴巴集团监控平台孵化为面向混合云企业客户的一站式全景监控平台,我们也会简单介绍面向混合云企业客户的监控产品解决方案。

内容大纲 

1. Sunfire--阿里巴巴双11背后的技术超级英雄

  • 从双11背后的监控挑战说起

    • 2020双11峰值流量下的监控技术挑战

    • 2020双11生产突袭要求下的监控挑战升级

  • 阿里巴巴技术风险&安全生产体系的前锋和基石--Sunfire监控平台

    • 基于业务监控的阿里巴巴集团安全生产监控体系

    • 面向1-5-10的阿里集团业务/应用监控体系

    • 阿里巴巴集团一站式全景监控平台-Sunfire功能介绍

  • 和阿里技术规模一起成长-Sunfire平台架构演进

    • Sunfire工程架构总览

    • Sunfire工程架构优化和演进

    • Topspeed-秒级海量时间序列实时计算的探索和实践

2. 智能化监控探索和实践

  • 阿里集团监控平台智能化功能架构

  • 智能监控技术架构演进

  • 秒级智能化监控探索和实践

    • 1-5-10要求下的秒级智能化监控的业务背景

    • 秒级智能监控报警策略的困难和挑战

    • 秒级智能监控技术架构

    • 秒级智能监控技术分解

      • 异常数据清洗策略的优化

      • 基线生成策略优化

        • 长期特征和短期特征结合的基线拟合

        • 拟合特征和报警特征的结合

      • 报警敏感度的折衷和优化

      • 集成报警策略的拓展和优化

      • 基于聚类算法的误报抑制

      • 面向阿里巴巴业务故障发现的定制化报警策略

    • 秒级智能化监控的业务效果展示

  • 智能错误码检测--时序异常检测之外的探索和实践

    • 将异常检测的环节前置-补全时序异常检测的“力所不及”

    • 从发现异常到定义正常--对异常检测的重新思考

    • 智能错误码检测技术架构

    • 智能错误码检测技术分解

      • 日志数据预处理

      • 面积错误码分布的特征工程

      • 错误码分布的异常检测

      • 基于通用特征的误报抑制

      • 基于反馈数据的算法优化

    • 智能错误码检测的业务效果展示

  • 阿里集团监控平台的智能化演进规划

  • 面向混合云企业客户的一站式全景监控平台简介

听众收益

1. 学习和了解阿里巴巴集团技术风险业务体系、监控平台技术体系及技术架构演进
2. 学习和了解阿里巴巴集团双11背后的秒级智能业务指标异常检测技术原理和架构演进
3. 学习和了解阿里巴巴集团智能错误码异常检测技术原理

交通指南

中国石油科技交流中心

Beijing International Convention Center
地址:北京市昌平区沙河镇黄河北街一号院石油科技交流中心
  • 微信咨询

  • 电话咨询

    联系电话:+86 17310043226

微信联系我们

小姐姐 Ring