许文强,腾讯云高级开发工程师,腾讯云消息队列 Kafka 技术负责人,Apache Kafka Contributor, 活跃于消息队列和 Serverless 相关开源社区。 精通业界主流消息队列,如 Kafka、RabbitMQ、RocketMQ、Pulsar 等等。在消息队列和 Serverless 领域有着深厚的技术储备。并具有丰富的大规模云上 PaaS 产品的商业化、产品设计、运维运营经验。

随着云计算技术的成熟,大量用户将服务部署到了公有云上。做为消息队列领域主要产品的 Apache Kafka ,因其架构设计本身的缺陷,导致其在长期存储、集群快速扩缩容等方面一直存在不足。尤其在大规模的集群运营过程中,问题尤为明显。另外,随着降本增效的诉求越来越强烈,为了降低成本,弹性的 Kakfa 架构慢慢成为了刚需。即用户迫切需要根据实际使用容量来弹性按量的使用 Kafka。此时,底层就需要无需感知底层资源的 Serverless 形态的 Kafka,以应对突发流量、波峰波谷等带来的稳定性和成本问题。因此需要从架构升级、混沌演练、运营体系等方面解决稳定性和成本的诉求。
本次分享主要通过弹性的计算存储架构、混沌工程演练、自动化调度运营体系三个维度来讲一下在降本增效的背景下如何保证大规模 Kafka 集群的稳定性。
演讲提纲:
1. 降本增效背景下大规模 Kafka 集群面临的稳定性挑战
2. 如何通过弹性的计算存储架构来提高集群的稳定性
3. 混沌工程在云上大规模 Kafka 集群 的落地实践
4. 云上消息队列在降本、稳定性、架构升级之间权衡的一些思考
你将获得:



微信咨询

电话咨询
微信联系我们

