2012年硕士毕业加入百度,随后主要从事定向广告,搜索系统,推荐系统等业务的架构研发。目前在百度Feed架构团队,负责推荐系统后端业务架构的技术研发工作。

2012年硕士毕业加入百度,随后主要从事定向广告,搜索系统,推荐系统等业务的架构研发。目前在百度Feed架构团队,负责推荐系统后端业务架构的技术研发工作。
在生产环境的PaaS平台中,为了应对流量增长、负载尖峰、硬件升级、大规模局部故障等,通常需要留有一定的资源冗余。百度Feed后端服务在全网提供超过4个9的可用性,为了应对极端情况,各个地域的PaaS集群在设计上都有一定资源冗余。此外,为了控制成本,业务迭代需要取得合理的投入产出比之后,才能正式上线推全。因此,我们结合推荐系统的业务特点,设计并实现了一套介于在线和离线之间的弹性近线计算架构。相比于在线计算,近线计算突破了在线计算的速度限制,为业务计算提升复杂度提供了更大空间;相比于离线批量计算,提供了时效性更强,稳定性更更高的策略计算方式。通过弹性的近线计算架构设计,在速度、成本和业务复杂度之间提供了更大的折中空间,充分利用冗余资源进行计算,为业务提供廉价算力,累计降低了超过10%的在线计算资源成本。
1. 背景介绍
2. 业务近线计算方案设计
3. 弹性近线计算推广落地案例分享
4. 总结与展望



微信咨询

电话咨询
微信联系我们

