
简介
该用户还未填写简介
擅长的技术栈
未填写擅长的技术栈
可提供的服务
暂无可提供的服务
PDI(kettle)兼容hadoop-连接CDH hadoop集群
1. 说明PDI可以与Hadoop协同工作。通过提交适当的参数,Kettle可以连接Hadoop的HDFS、MapReduce、Zookeeper、Oozie、Sqoop和Spark服务。在数据库连接类型中支持Hive、Impala和HbasePDI获取:https://sourceforge.net/projects/pentaho/files/Pentaho-9.2/client-tools/
DataX自定义transformer进行数据校验
DataX自定义transformer进行数据校验
PDI(kettle) 阻塞数据直到步骤都完成、Blocking step组件用法及区别
阻塞数据直到步骤都完成此步骤只是等待,直到对话框中指定的所有步骤副本都完成。可以使用它来避免转换步骤副本之间存在的自然并发(并行)描述:**监视下面的步骤:**在此表格中指定要等待的步骤,可点击“获取步骤”按钮将转换中的全部步骤自动填充到表格中。复制次数:步骤的副本号,当所选步骤具有多线程时(线程可通过右键点击步骤选择“改变开始复制的数量”进行设置,即设置多少份的拷贝,开多少线程。),可设置线程号
到底了







