大数据平台实时数仓从0到1搭建之 - 14Maxwell & Canal 对比概述环境数据库配置安装配置启动命令输出结果HA监控web总结概述前两章分别写了maxwell和canal的安装使用，我本人其实是第一次听说这两个工具。那就从新手使用方面，对比下这两个工具。环境工具版本LinuxCentos 7JDK1.8scala2.11mariadb10.3Zookeeper3.5.8kafk

关于虚拟机基础配置，jdk安装，免密登录

大数据平台实时数仓从0到1搭建之 - 01 目录概述目录概述由于公司架构选型，正好有机会可以从传统数仓向大数据离线实时数仓转型，记录下自己学到的东西,以及遇到的问题。预计框架组件，希望路过的大佬可以指点一二hadoop，hive，hbase，zk，kafka，flink，mysql目录大数据平台实时数仓从0到1搭建之 - 01 目录大数据平台实时数仓从0到1搭建之 - 02 架构设计大数据平台实时

大数据平台实时数仓从0到1搭建之 - 13 Canal概述Canalquickstart修改MariaDB配置Docker下载canal-server启动canal-server客户端输出收尾附客户端代码概述今天学习下Mysql数据库的实时数据采集，看着网上比较流行的有阿里的Canal和Maxwell，看着GitHub上还是用Canal的的人多一点，可能是因为阿里的开源项目。不过，工具不在乎背景，

大数据平台实时数仓从0到1搭建之 - 13 Canal概述Canalquickstart修改MariaDB配置Docker下载canal-server启动canal-server客户端输出收尾附客户端代码概述今天学习下Mysql数据库的实时数据采集，看着网上比较流行的有阿里的Canal和Maxwell，看着GitHub上还是用Canal的的人多一点，可能是因为阿里的开源项目。不过，工具不在乎背景，

按照官网步骤sbin/start-yarn.sh失败环境sbin/start-yarn.sh 启动失败sbin/stop-yarn.sh 执行失败环境Centos7 - 1台虚拟机hadoop-3.2.1OpenJDK1.8.0_181root用户 - 伪分布式sbin/start-yarn.sh 启动失败[root@ip10 hadoop-3.2.1]# sbin/start-yarn.shSt

启动hadoop后，无法访问NameNode网页环境按照官网步骤启动hadoop后，无法访问页面环境Centos7 - 1台虚拟机hadoop-3.2.1OpenJDK1.8.0_181root用户 - 伪分布式按照官网步骤启动hadoop后，无法访问页面我这里遇到的是linux防火墙问题，学习阶段建议关闭防火墙，避免在不必要的问题上浪费精力systemctl status firewalld.s

从本地往hadoop上复制文件失败环境执行bin/hdfs dfs -put etc/hadoop/*.xml input失败问题2：Name node is in safe mode.环境Centos7 - 1台虚拟机hadoop-3.2.1OpenJDK1.8.0_181root用户 - 伪分布式执行bin/hdfs dfs -put etc/hadoop/*.xml input失败[root

Linux开机失败，救援模式修复环境步骤环境系统 - 虚拟机 centos7为了搭建samba，开启了selinux，然后系统开机就一直在转圈圈，所以本文记录救援模式修复的过程步骤重启系统进入内核，看到如图菜单的时候按e键，进入编辑模式找到如下图所示位置，添加rd.break console=tty0,然后按CTRL + X保存，系统自动重启理论上不出问题的话，将看到如下界面，然后执行,注意rw和

按照官网步骤sbin/start-yarn.sh失败环境sbin/start-yarn.sh 启动失败sbin/stop-yarn.sh 执行失败环境Centos7 - 1台虚拟机hadoop-3.2.1OpenJDK1.8.0_181root用户 - 伪分布式sbin/start-yarn.sh 启动失败[root@ip10 hadoop-3.2.1]# sbin/start-yarn.shSt