
简介
该用户还未填写简介
擅长的技术栈
未填写擅长的技术栈
可提供的服务
暂无可提供的服务
【Kettle】性能优化
系统配置优化:修改kettle定时任务中Kitchen与Pan脚本中参数配置,调整JVM大小进行性能优化。Kettle中控件参数配置优化:调整提交(Commit)记录数大小进行优化例如:如修改RotKang_Test01中的“表输出”组件中的“提交记录数量”参数进行优化,Kettle默认Commit数量为:1000,可以根据数据量大小来设置Commit size:1000~50000通过改变开始复
【Hadoop】运维记录
1. namenode 被重新格式化,datanode数据版本与namenode不一致ERROR org.apache.hadoop.hdfs.server.datanode.DataNode: java.io.IOException: Incompatible namespaceIDs in /home/hadoop/tmp/dfs/data: namenode namespaceID = 39
【Flink】flink on k8s 部署方案
Flink平台部署方案持续保持更新有些部署yaml借鉴的文章忘记哪里搬过来了额,但是经过自己测试过可行再次表谢感谢1. HDFS部署 (k8s)可以单独create -f 部署,也可以基于helm统一部署1.1 hdfs-conf.yamlapiVersion: v1kind: ConfigMapmetadata:namespace: dev-flink-platname: kube-hadoop
到底了







