logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

Hadoop-3.3.5 全分布式集群部署

一、前期准备1、hadoop-3.2.0安装包http://archive.apache.org/dist/hadoop/common/hadoop-3.2.0/hadoop-3.2.0.tar.gz2、配置jdk1.8vim /etc/profile #添加如下信息export JAVA_HOME=jdk安装目录export CLASSPATH=$JAVA_HOME/lib/export PAT

#hadoop#big data#大数据
Flink Checkpoint 和 Spark Checkpoint 的区别

更像一个“它主要目的是,避免因链路过长导致的性能问题或 StackOverflowError。它是一个** coarse-grained(粗粒度)** 的、的、的容错机制。:是一个“它是 Flink,用于在发生故障时,将整个分布式数据流状态恢复到一致性的检查点,实现或 At-Least-Once 语义。它是一个的、的、的容错机制。简单来说,Spark Checkpoint 是为了解决 RDD 带来

#flink#spark#大数据
到底了