开发目的：提高百万级数据插入效率。采取方案：利用ThreadPoolTaskExecutor多线程批量插入。采用技术：springboot2.1.1+mybatisPlus3.0.6+swagger2.5.0+Lombok1.18.4+postgresql+ThreadPoolTaskExecutor等。具体细节：第一步：application-dev.properties添加...

前言由于想在k8s上，安装kafka集群，于是选中helm工具！下载helm二进制包https://github.com/helm/helm/releases选取其链接，进行下载！wget https://get.helm.sh/helm-v2.14.3-linux-amd64.tar.gz安装helm客户端tar -zxvf helm-v2.14.3-linux-amd64.tar.gzmv /

问题docker 容器日志报java.io.IOException: Can't resolve address: node04:9092at java.lang.Thread.run(Thread.java:748) [na:1.8.0_272]Caused by: java.nio.channels.UnresolvedAddressException: nullat sun.nio.ch.N

前言首先确定kafka与zookeeper集群的调优方向调大zookeeper的heap内存　　调大zookeeper的heap内存，默认是1G，可以根据服务器大小配置其堆内存为2G或者4G，kafka实时传输的数据如果达到PB级别的话，得观察一下YGC和FGC的值可以适当再次调大。修改kafka的副本数修改kafka的副本数，默认的副本数是1，建议修改为2，如果副本数为2，那么容灾能力就是1，如

前言由于想在k8s上，安装kafka集群，于是选中helm工具！下载helm二进制包https://github.com/helm/helm/releases选取其链接，进行下载！wget https://get.helm.sh/helm-v2.14.3-linux-amd64.tar.gz安装helm客户端tar -zxvf helm-v2.14.3-linux-amd64.tar.gzmv /

场景：harbor服务器磁盘占用为100%：听同事说，harbor服务器，不能上传镜像，jenkins不能正常工作。问题描述：最开始以为，docker的日志，占用过多，但是用脚本删除，磁盘仍然占用100%#!/bin/shecho "======== start clean docker containers logs ========"logs=$(find /var/lib/docker/co

前言由于Spark的抽象设计，我们可以使用第三方资源管理平台调度和管理Spark作业，比如Yarn、Mesos和Kubernetes。基本原理基本原理当我们通过spark-submit将Spark作业提交到Kubernetes集群时，会执行以下流程：Spark在Kubernetes pod中创建Spark driverDriver调用Kubernetes API创建executor pods，ex

前言KubeSphere® 是经CNCF 认证的 Kubernetes 主流开源发行版之一，在 Kubernetes 之上提供多种以容器为资源载体的业务功能模块，如多租户管理、集群运维、应用管理、DevOps、微服务治理等功能。最近微服务，要部署到k8s，采用KubeSphere应用为中心的容器管理平台，于是捣鼓怎样去部署，第一次部署成功，好像不稳定，再次恢复四台服务器镜像，重新部署，其中遇到很多

前言感觉StringRedisTemplate和RedisTemplate非常的相识，到底有什么区别和联系呢？点开idea，打开其依赖关系，可以看出只需使用maven依赖包spring-boot-starter-data-redis，然后在service中注入StringRedisTemplate或者RedisTemplate即可使用。从下图StringRedisTemplate继承了RedisT