logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

Linux shell自动化检测 网络与端口 联通情况

背景:我们某个机房交换机需要替换,替换完成后,我们也需要校验主机和服务的连通性。以前只测某个主机时,测网络的话就ping一下,测端口的话就telnet一下。现在机器多起来,挨个敲命令就太麻烦了。花了一点时间写了一个通用脚本,现在分享一下。分享脚本前先普及一下,脚本里核心的原理和方法测试网络测试网络,我们都会用ping,但是linux默认情况下ping会一直进行(windows是默认4次).....

#linux#网络#自动化
kafka leader-epoch-checkpoint 文件结构

kafka partition files引言indexlogsnapshottimeindexleader-epoch-checkpoint文章参考及引用引言kafka的每个partition下都有以下5类文件# 其中数字123456只是举个栗子00000000000000123456.index00000000000000123456.log00000000000000123456.snaps

#kafka
关于Kafka其中一个Broker挂掉后,生产者正常,消费者无法消费的问题

昨晚运维同事报告,生产集群的kafka写数据正常,但是下游消费数据全都出错。当时核查发现,是因为broker0因为内存溢出(待核查,感觉应该是ulimit的问题)后宕了。其他broker正常,当时很奇怪,所有topic都做了副本,按理应该挂掉一个broker应该能正常消费啊。由于影响生产,赶紧把broker0重启了。后来发现下游所有消费者都从earliest消费(我们的程序也是设置的earlies

#kafka#大数据
Kafka-Broker Spread,Broker Skewed,Broker Leader Skewed指标含义

Kafka 几个监控指标的含义网上也有很多文章讲解这些个指标的含义,但总感觉还不够透彻。至少我是一知半解的。我查看了kafka eagle的源码,再举一些栗子来说明。Broker Spread引用kafka-eagle几个指标含义...

#kafka
到底了