logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

kafka 消息的分区分配策略

在实际生产过程中,每个topic都会有多个partition,多个partition的好处在于,一方面能够对broker上的数据进行分片有效减少消息的容量从而提升io性能。另一方面,为了提高消费端的消费能力,一般会通过多个consumer 去消费同一个topic,也就是消费端的负载均衡机制。在group.id相同的consumer进行消费同一个topic时,一个consumer消费过得数据在另一c

#kafka
clickhouse 参数优化配置

max_memory_usage_for_user,max_memory_usage,max_bytes_before_external_group_by,max_bytes_before_external_sort,max_memory_usage_for_all_queries,max_concurrent_queries_for_user,max_concurrent_queries_for

#数据库
到底了