logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

自建kafka和公有云kafka对比

阿里云相关文档:开源对比:开源对比 - 产品简介| 阿里云使用限制:使用限制 - 产品简介| 阿里云存储引擎对比 :存储引擎对比 - 产品简介| 阿里云腾讯云相关文档:开源对比:消息队列 CKafka 开源对比 - 产品简介 - 文档中心 - 腾讯云使用限制:消息队列 CKafka 使用限制 - 产品简介 - 文档中心 - 腾讯云类型数据过期时间支持版本是否暴露zk

#kafka#分布式#java
JDK

官网/下载页面:https://www.oracle.com/technetwork/java/javase/downloads/index.html一、环境说明安装路径/usr/版本(虚拟机)jdk1.8.0_51版本(容器)jdk1.8.0_131二、安装步骤1、手动安装1.1解压tar -xfjdk-8u51-linux-x64...

k8s+dubbo架构集群内外网络通讯解决方案

一、问题k8s有自己的一套网络管理机制,集群内的容器和容器之间是可以相互通信的。但是在容器化升级改造的过程中,不可能一步到位的将所有的服务全部迁移到k8s的容器当中来,毕竟新的技术在没有经过实践趟坑时,肯定不能轻易的全面铺开升级。那么就涉及到集群外的服务访问集群内的服务,集群内容器中的ip都是k8s管理的IP,dubbo服务注册的也是获取的容器内分配的IP。比如宿主机ip是10.201.7...

#docker
kafka基础概念

简介Kafka是一个分布式、支持分区的(partition)、多副本的(replication)的基于发布/订阅模式的消息队列,主要应用于大数据实时处理领域。消息的传输过程中保存消息的容器叫做消息队列。把数据放到消息队列叫做生产者,从消息队列里边取数据叫做消费者.特性1)高吞吐量、低延迟:kafka每秒可以处理几十万条消息,它的延迟最低只有几毫秒,每个topic可以分多个partition, 消费

#kafka#分布式#java
kafka日常运维工作

一、创建/删除/重建topic1、创建:./bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 2 --partitions 10 --topicTOPIC_NAME2、删除:./bin/kafka-topics.sh --delete --zookeeper localhost:2181 --t

#kafka#运维#分布式
Kafka各个版本差异汇总

从0.8.x,0.9.x,0.10.0.x,0.10.1.x,0.10.2.x,0.11.0.x,1.0.x或1.1.x升级到2.0.0Kafka 2.0.0引入了线程协议的变化。通过遵循下面建议的滚动升级计划,您可以保证在升级期间不会出现停机。但是,请在升级之前查看2.0.0中的重大更改。对于滚动升级:更新所有代理上的server.properties并添加以下属性。CURRENT_...

修改Harbor网桥网段

(docker ps,然后docker stop id先停止所有docker服务)查看网桥docker network ls删除网桥(删除已harbor开头的网桥)docker network remove face1687e9eb创建网桥docker network create --driver=bridge --subnet=192.168.2.0/24 harbordocker...

SpringBoot项目发版Pipeline

def ServiceName= “demo”def ProjectDir= “demo”def DockerfileDir= “project/demo”def gitCommitdef gitBranchdef shortGitCommitnode {def DOCKER_HUB_ADDR=‘registry.test.inside’stage('Git ...

资源配额(ResourceQuota)

1、资源配额概述当存在多个用户或团队共享数目国定的集群时,就需要考虑如果有人使用的资源可能会超出应有的份额带来的问题,资源配额(ResourceQuota)就是用来帮助集群管理员解决上述问题的工具。在Kubernetes集群中通过ResourceQuota对象定义每个命名空间(namespace)的资源配额,从而实现资源消耗总量的限制。 资源配额有两个作用:1)可以按类型限制命名空间(na...

KafkaConsumer重置Offset

在Kafka Version为0.11.0.0之后,Consumer的Offset信息不再默认保存在Zookeeper上,而是选择用Topic的形式保存下来。在命令行中可以使用kafka-consumer-groups的脚本实现Offset的相关操作。更新Offset的三个维度:Topic的作用域重置策略执行方案Topic的作用域--all-topics:为consumer group下所有top

#kafka#java#分布式
    共 11 条
  • 1
  • 2
  • 请选择