最近在做一个flink程序的监控，技术选型以后最终选择将flink指标通过pushgateway来写道prometheus中，程序架构如下：JobManager和TaskManager进程都独立将指标push给PushGateway，然后Prometheus再定时去抓去PushGateway中指标，指标进Prometheus以后再通过grafana配置监控图。flink配置参数如下：metrics

kudu1.8没有提供Linux客户端可供使用，所以只能通过api进行测试。pom引入kudu-client<dependency><groupId>org.apache.kudu</groupId><artifactId>kudu-client</artifactId><version&gt...

win10-wsl2-docker/k8s使用笔记

metrics官网地址：https://github.com/kubernetes-sigs/metrics-server/

本文将基于虚拟机器中centos7.9安装单节点k8s-v1.20.6。0.系统信息ip: 172.16.89.2hostname: hadoop00user: root1.系统参数配置1.1 关闭swap# 不关闭swap初始化会报错，有办法跳过，但是建议还是关闭swapoff -ased -i.bak '/swap/s/^/#/' /etc/fstab1.2关闭selinuxsetenforc

公司最新需要新搭建一套带kerberos的kafka集群，kerberos已经有别的团队搭建完成，此文章只记录kafka配置kerberos的部分。在kerberos配置kafka用户# 创建kafka/hadoop03用户kadmin.local -q "addprinc -randkey kafka/hadoop03"# 导出keytab文件kadmin.local -q

正常情况安装kudu需要安装ntp服务，由于我只是在虚拟机内做测试，所以跳过安装ntp。yum install https://github.com/MartinWeindel/kudu-rpm/releases/download/v1.8.0-1/kudu-1.8.0-1.x86_64.rpm在/etc/kudu/conf/master.gflagfile和/etc/kudu/conf...

1.配置swagger使用jwt可以通过编程式实现，也可以通过注解式实现，我这里拿注解式举例@SpringBootConfiguration@OpenAPIDefinition(info = @Info(title = "API", version = "v1"))@SecurityScheme(name = "token",type = SecuritySchemeType.HTTP,beare

通过flink-mongo-cdc同步数据到clickhouse