大数据之元数据管理

数据中台

Spark 框架模块包含：Spark Core、 Spark SQL、 Spark Streaming、 Spark GraphX、 Spark MLlib，而后四项的能力都是建立在核心引擎之上。【Spark Core】：Spark的核心，Spark核心功能均由Spark Core模块提供，是Spark运行的基础。Spark Core以RDD为数据抽象，提供Python、Java、Scala、R语

数据中台

这样打开控制柜，一看过去就能知道所有设备的IP地址，且不会混乱。1、在设备和网络中，添加ET200SP设备。至此组态完成，可以开始你的demo。6、修改子模块的IO地址。2、修改模块的IP地址。

4、其他常见的485口。

大数据之元数据管理

数据同步工具DataX、Sqoop、Maxwell、Canal

由于默认拉取镜像地址k8s.gcr.io国内无法访问，这里指定阿里云镜像仓库地址，【执行上述命令会比较慢，因为后台其实已经在拉取镜像了】，我们 docker images 命令即可查看已经拉取的镜像。status 为NotReady，表示master节点已经运行了，但是还是处于未准备状态，需要在slave节点执行其他命令，将 slave1和slave2节点加入到maste节点。8、master节点

kafkatool工具乱码