logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

Kafka集群Node disconnected排查全记录

一、问题现象搭建3节点Kafka集群(master、slave1、slave2),启动后日志疯狂刷屏报错,核心报错信息如下:plain text[2026-04-11 15:13:09,594] INFO [Controller id=0, targetBrokerId=2] Node 2 disconnected. (org.apache.kafka.clients.NetworkClient)

#大数据#kafka
Flink集群启动失败完整排查过程(含踩坑与解决方案)

问题现象:执行start-cluster.sh后,控制台提示“Starting taskexecutor daemon on host slave1/slave2”,但登录slave1、slave2执行jps,仅能看到Jps进程,无TaskManagerRunner(TaskManager启动后秒退);但确认“架构修改”本身逻辑正确,排除架构冲突导致问题。3.slave1、slave2节点的fli

#flink#大数据
错误:找不到或加载主类 org.apache.spark.deploy.yarn.ExecutorLauncher

最后配置/usr/local/spark/conf/spark-defaults.conf 文件,配置语句为: spark.yarn.jars hdfs://master:9000/user/hadoop/jars/*.jar,其中 master为你的主机名,/user/hadoop/jars 为 jar 包在 HDFS 上的位置。解决办法:配置 spark 中的 spark-defaults.c

文章图片
#大数据#spark
Kafka集群Node disconnected排查全记录

一、问题现象搭建3节点Kafka集群(master、slave1、slave2),启动后日志疯狂刷屏报错,核心报错信息如下:plain text[2026-04-11 15:13:09,594] INFO [Controller id=0, targetBrokerId=2] Node 2 disconnected. (org.apache.kafka.clients.NetworkClient)

#大数据#kafka
到底了