快手大时长应用可观测挑战及应对实践

所属专题:全景全栈可观测性实践

嘉宾 : 王辉 | 快手客户端架构师

会议室 : 汉宫+明宫

讲师介绍

专题演讲嘉宾:王辉

快手客户端架构师

2021 年至今,在快手负责快手系埋点架构及研发数据基建。在埋点体系建设、长链路归因、变更归因方面有较深入的探索。2015 年至 2020 年,在去哪儿网负责门票玩乐技术团队期间,带领团队在移动端动态化、统一埋点、One Data 体系、推荐体系、智能营销系统方面有一定突破。

议题介绍

演讲:快手大时长应用可观测挑战及应对实践

在大时长应用的可观测性中,超长且复杂的链路是一个重要的体现。长链路归因是流量领域的常见挑战之一,小到订单路径大到流量拆分,从算法的内容策略归因到资源成本分摊,都高度依赖于长链路埋点基建。长链路归因强依赖埋点透传机制,那么在客户端如何界定透传的业务架构与平台架构的边界?新的埋点标准如何在保持统一性的同时提高效率?面对众多存量场景导致的高替换成本,以及增量业务迭代的不收敛,如何实现存量与增量的全面覆盖?这些问题都是解决长链路归因埋点问题时需要权衡的典型问题。在本次分享中,我将基于在快手牵头长链路埋点标准建设、数据治理及架构建设的经验,与大家深入探讨这些问题。

演讲提纲

1.  超长路径带来的关键问题

  • 大时长意味着超长路径
  • 关键问题1:长路径归因问题(面向分析师)
  • 关键问题2:算法内容归因问题(面向算法)
  • 关键问题3:故障定位问题(面向研发)

2. 可观测体系构建

  • 横向组织阵型建设:用委员会机制凝聚共识,科学推进
  • 规范化建设及治理:有效的问题分类、分级,保障基建高效彻底落地
  • 平台化建设:通过自动化、自助化实现极值的埋点、应用效率

3. 长路径归因解法实践

  • URT 染色:用自动化透传机制解决长路径订单归因问题
  • STID 策略 ID:用多通道透传机制,解决内容分发、算法归因问题
  • 相关性变更归因:在 80% 故障场景下,用相关性归因替代 Trace 归因

4. 总结与展望

  • 推进效果及反思
  • 未来展望,更全面的落地,更高的效率

您认为,这样的技术在实践过程中有哪些痛点?

  • 破旧立新 vs. 在问题中演进。由于数据消费的复杂性,我们采用的是快速演进的方式,演进中逐步替代老基建。
  • 新标准如何在可控成本下进行增量覆盖及存量替代。我们采取的是基于现有架构对不同业务形态提出不同的收敛架构,从而实现存量平滑覆盖及增量需求卡口。
  • 高精度 vs. 成本可控。动辄万亿条级别的数据,我们选择的是基于应用场景等级进行不同级别采样的方案。

演讲亮点

  • 统一的长链路埋点架构,让业务团队不再关注透传需求,透传机制及质量保障由 SDK 负责,从而实现效率和质量的双重保障。
  • 新型归因平台,覆盖线上80%的故障,提供了分钟级归因定位能力,为移动端故障止损提供了基础支撑。

听众收益

通过收听本次演讲,您将至少在以下方面了解到我们最新的探索进展及收获:

  • 在埋点领域,搭建自动化长链路机制,并且兼顾分析师、算法、研发多种决策的归因诉求等方面的建设经验。
  • 在排障领域,移动端如何用变更归因架构替代Trace机制,从而获得更好的精度及时效性的建设经验。

交通指南

北京石景山万达嘉华酒店

Wanda Jin
地址:北京市石景山区石景山路甲18号院
  • 微信咨询

  • 电话咨询

    联系电话:+86 18514549229

微信联系我们

如您在购票过程中遇到问题,请扫码咨询票务小助手