节点基础环境准备

搭建真正分布式HDFS集群至少需要3台Linux节点，这里准备5台Linux节点，节点名称和ip信息如下，我们可以从头搭建各个Linux节点也可以基于已有快照创建各个Linux节点。

这里默认已经创建好以上各个节点，并且每个节点分配资源为4核2G内存，在后续大数据学习过程中建议每台节点至少给到2核2G，否则可能一些组件不能正常运行问题。下面对这5个节点进行基础配置。

配置各个节点的Ip

启动每台节点，在对应的节点路径“/etc/sysconfig/network-scripts”下配置ifg-ens33文件配置IP（注意，不同机器可能此文件名称不同，一般以ifcfg-xxx命名），以配置ip 192.168.179.4为例，ifcfg-ens33配置内容如下：

配置主机名

在每台节点上修改/etc/hostname,配置对应的主机名称，参照节点IP与节点名称对照表分别为：node1、node2、node3、node4、node5。配置完成后需要重启各个节点，才能正常显示各个主机名。

关于Centos hostname配置有如下几点建议：

hostname只允许包含ascii字符里的数字0-9，字母a-zA-Z，连字符-和.，其他都不允许。例如，不允许出现其他标点符号，不允许空格，不允许下划线，不允许中文字符。
hostanme开头和结尾字符不允许是连字符。
hostanme强烈建议不要用数字开头，尽管这一条不是强制的。
hostanme建议用小写字母而不用大写字母。

关闭防火墙

关闭SELinux

SELinux就是Security-Enhanced Linux的简称，安全加强的linux。传统的linux权限是对文件和目录的owner, group和other的rwx进行控制，而SELinux采用的是委任式访问控制，也就是控制一个进程对具体文件系统上面的文件和目录的访问，SELinux规定了很多的规则，来决定哪个进程可以访问哪些文件和目录。虽然SELinux很好用，但是在多数情况我们还是将其关闭，因为在不了解其机制的情况下使用SELinux会导致软件安装或者应用部署失败。

在每台节点/etc/selinux/config中将SELINUX=enforcing改成SELINUX=disabled即可。

配置阿里云yum源

设置Linux 系统显示中文/英文

设置自动更新时间

后续基于Linux各个节点搭建HDFS时，需要各节点的时间同步，可以通过设置各个节点自动更新时间来保证各个节点时间一致，具体按照以下操作来执行。

1) 修改本地时区及ntp服务
yum -y install ntp
rm -rf /etc/localtime
ln -s /usr/share/zoneinfo/Asia/Shanghai /etc/localtime
/usr/sbin/ntpdate -u pool.ntp.org

2) 自动同步时间

设置定时任务，每10分钟同步一次，配置/etc/crontab文件，实现自动执行任务。建议直接crontab -e 来写入定时任务。使用crontab -l 查看当前用户定时任务。
#各个节点执行 crontab -e 写入以下内容
*/10 * * * *  /usr/sbin/ntpdate -u pool.ntp.org >/dev/null 2>&1

#重启定时任务   
service crond restart

#查看日期
date

设置各个节点之间的ip映射

配置节点之间免密访问

以上node1向各个几点发送文件时需要输入密码，经过以上步骤，节点两两免密完成。

Hadoop集群运行模式

可以参考Hadoop官网进行Hadoop集群搭建，目前Hadoop集群搭建有三种模式：

本地模式：单机运行，只能单机测试MapReduce运行任务，生产和测试都不会使用。
伪分布式模式：单机运行，一台节点部署所有Hadoop角色，模拟分布式集群环境，具备Hadoop集群所有功能，生产和测试一般不会使用。
完全分布式模式：多台服务器部署Hadoop集群，各个角色分布到不同节点上执行，生产和测试环境中经常使用。
后续搭建Hadoop 中HDFS集群时，我们会基于伪分布式和完全分布式两种搭建方式进行讲解，重点掌握完全分布式集群搭建。