logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

clickhouse之HDFS云存储

文章目录测试环境配置方法底层实现零拷贝总结导读:看官方文档说clickhouse现在支持HDFS和AWS S3作为数据存储的仓库,如果是这样的话,那就意味着基于clickhouse也可以实现"存储与计算分离"的架构设计了,那自然对于整个系统的可靠性和可扩展性是有极大帮助的。本文尝试着对这一新功能一探究竟~~测试环境clickhouse版本:21.8,我们的环境之前有一个20.6的版本,尝试后发现并

#hadoop#big data#database
如何把VuePress制作的文档管理页面打包进现有的vue项目中?

VuePress是一个很好的静态网站制作工具,如果你希望将VuePress制作的静态页面和你的主应用一起打包,那么这里可以给你提供一些思路。

文章图片
#vue.js#javascript#前端
如何把VuePress制作的文档管理页面打包进现有的vue项目中?

VuePress是一个很好的静态网站制作工具,如果你希望将VuePress制作的静态页面和你的主应用一起打包,那么这里可以给你提供一些思路。

文章图片
#vue.js#javascript#前端
linux测试磁盘读写能力

在平时的工作中,经常需要评估一些服务器的资源,磁盘IO是其中一个容易出现瓶颈的地方,那么我们通常需要预先知道该服务器上的磁盘IO能达到多少。在这里记录一下经常用到的一个用来测试磁盘读写能力的命令。1. dd命令dd 命令从标准输入或文件中读取数据,根据指定的格式来转换数据,再输出到文件、设备或标准输出。主要参数说明:if 指定读取的文件路径of 指定输出的文件路径bs 传输的每个数据块的大小cou

#linux#运维#centos
浅谈zookeeper在clickhouse中的使用

对于大多数分布式软件而言,数据的一致性问题是其必须要考虑的内容,zookeeper是最常见的也是使用最广泛的一个解决数据一致性问题的工具,clickhouse在其分布式方案的设计中也引入了zookeeper的使用,并强依赖于此。本文根据最近的一些项目经验,从原理和实践上来简单总结一下zookeeper在clickhouse中的使用吧~~1. zookeeper的用途zookeeper从存储的角度来

#zookeeper#分布式#java
浅谈kafka之partition

partition(分区)是kafka的一个核心概念,kafka将1个topic分成了一个或多个分区,每个分区在物理上对应一个目录,分区目录下存储的是该分区的日志段(segment),包括日志的数据文件和两个索引文件。然后每个分区又对应一个或多个副本,由一个ISR列表来维护。 注意:分区数可以大于节点数,但是副本数不能大于节点数,因为副本需要分不到不同的节点上,才能达到备份的目的。1. parti

#kafka
到底了