logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

Flink生产问题排障-Failed to deserialize consumer record

基于Canal+Kafka+Flink+Hudi的实时数据入湖链路出现Flink作业频繁重启故障,表现为Kafka偏移量卡住、反序列化异常和checkpoint超时问题,介绍了由表及里的根因排查定位过程与解决。

文章图片
#flink#大数据
Flink生产问题排障-Kryo serializer scala extensions are not available

Flink任务使用RocksDB状态后端和StateTTL时,因Kryo序列化器在后台Compaction线程中无法获取类加载器导致崩溃。文章从问题现象、原因分析、解决方案等方面讲述Flink生产实战。

文章图片
#flink#大数据
到底了