首页
学习
活动
专区
工具
TVP
发布

杨原 | 腾讯云Kafka自动化运营实践

讲师

杨原

腾讯 高级工程师

腾讯基础架构部高级工程师

议题介绍

大数据时代的来临使得Apache Kafka的使用范围远不止是消息通道。腾讯云上部署的Kafka集群日处理消息量超过数万亿条,并且还在高速增长。 如此大规模的Kafka集群每天都会面临故障节点的移除、新节点的加入、节点间数据倾斜、用户所需Kafka实例的动态升降配、Borker资源利用率不均衡、不同区域间数据迁移等各种各样的需求,如何能够高效智能的发现异常,生成修复任务并自动执行,避免完全依赖运维人员人肉运维是腾讯中间件团队必须要考虑的事情,本文将重点分享腾讯云CKafka是如何解决上述问题实现大规模自动化运营的。

领券