logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

CDH hadoop hdfs 磁盘重平衡

最近CDH磁盘空间不够了,于是每个节点都扩容了1T空间,挂载之后发现新磁盘虽然在写入,但是数据量较少,所以需要在每个节点内部的新旧磁盘之间进去重新平衡。如果是开源的hadoop也可以去修改hdfs-site.xml的配置,后续执行命令即可。

文章图片
#hdfs#xml#npm
时序数据库:TDengine安装部署 3节点

进入到TDengine-server-2.0.0.0-Linux-x64.tar.gz安装包所在目录,先解压文件后,进入子目录,执行其中的install.sh安装脚本:在所有物理节点安装 TDengine,且版本必须是一致的,但不要启动 taosd

文章图片
#时序数据库#tdengine#数据库
canal-1.1.7 实时同步mysql至kafka配置

Releases · alibaba/canal · GitHub我下载的是最新版1.1.7:canal.deployer-1.1.7.tar.gz此为部署安装包,没有管理界面,可满足基础使用。上传至服务器,在需要安装的路径新建一个canal-1.1.7文件夹,解压至该文件夹:修改文件:重启mysql服务以上表示创建canal用户,密码为canal123,授权所有库的查询、插入、复制slave等所

文章图片
#mysql#kafka#数据库
datax安装及批量生成json任务文件,以sqlservrreader和mysqlwriter为例

4. 查看DataX配置文件模板:按自己需要填写reader和writer5. 格式示例"job": {"content": ["reader": {"name": {: ["jdbcUrl": [],"table": ["t_info"],"password""username""sa""where""column": ["id"

文章图片
#linux#运维#服务器 +2
canal-1.1.7 实时同步mysql至kafka配置

Releases · alibaba/canal · GitHub我下载的是最新版1.1.7:canal.deployer-1.1.7.tar.gz此为部署安装包,没有管理界面,可满足基础使用。上传至服务器,在需要安装的路径新建一个canal-1.1.7文件夹,解压至该文件夹:修改文件:重启mysql服务以上表示创建canal用户,密码为canal123,授权所有库的查询、插入、复制slave等所

文章图片
#mysql#kafka#数据库
flink mysql cdc 无法监控变动数据的问题

初始数据可以同步,但是对监控的表的数据增删改都无法同步

文章图片
#flink#大数据#分布式
ollama+deepseek+ragflow本地化部署知识库大模型配置

(默认c盘安装,安装路径:C:\Users\admin\AppData\Local\Programs\Ollama)1.1配置环境变量:ragflow能访问到:OLLAMA_HOST=0.0.0.0:11434ollama型下载路径:OLLAMA_MODELS=C:\xmx\dseek\OllamaModels 【模型存放路径,可自定义,ollam会根据配置将模型下载到该路径】1.2重启机器。

文章图片
#eureka#云原生
    共 19 条
  • 1
  • 2
  • 请选择