
简介
该用户还未填写简介
擅长的技术栈
未填写擅长的技术栈
可提供的服务
暂无可提供的服务
SkyWalking 消费积压 6 亿条:一次 Kafka 分区倾斜的深度复盘
摘要 当SkyWalking的Kafka消费积压6亿条消息时,紧急扩容分区无效,排查发现数据倾斜严重,少数分区承担了绝大部分流量。深入源码发现,Agent上报数据时固定以实例名作为Kafka消息的Key,导致相同实例的数据始终路由到同一分区。解决方案包括:1)紧急降低采样率减少数据量;2)修改源码将Key设为null,使Kafka均匀分配数据。最终通过优化配置和源码修复解决了积压问题,保障了系统稳
到底了







