1. 环境要求    VMWare软件；    CentOS6.5对应的iso镜像文件（位数对应个人计算机位数）。2. 安装步骤    打开VMWare，文件->新建虚拟机（以下几步默认跳过即可）  命名和选择安装路径  关联镜像文件    启动虚拟机进行安装操作    选择跳过即可    该提示忽略即可，点击OK    选择语言，默认跳过就行    设置主机名选择语言和时区设置ro

Hive在客户端上的安装部署一、客户端准备：  到这我相信大家都已经搭过三节点集群了，如果是的话则可以跳过一，直接进入二。如果不是则按流程来一遍！1、克隆虚拟机，见我的博客：虚拟机克隆及网络配置。2、 实现客户端和集群的连接（该步骤为多节点集群搭建，详情见我博客：节点Hadoop集群搭建有多节点集群的请跳到二）（1）配置时钟同步：保证客户端和集群的时间是同步的，具体操...

Spark on Yarn模式运行错误：bin/spark-shell --master yarn --deploy-mode client#报错查看8088页面上的工作日志错误原因：在执行任务时检测到虚拟机的内存太小，2.2g的虚拟内存实际值，超过了2.1g的上限，不能满足该任务所需的内存要求，于是Yarn就干掉了执行此任务的contrainer。解决办法：在y...

1. 基础环境搭建    新建3个CentOS6.5操作系统的虚拟机，命名（可自定）为masternode、slavenode1和slavenode2。该过程参考上一篇博文CentOS6.5安装配置详解 2.Hadoop集群搭建（以下操作中三个节点相同的地方就只给出主节点的截图，不同的才给出所有节点的截图）  2.1 系统时间同步    使用date命令查看当前系统时间    系统时间同步[roo

这一批博文是博主由博客园搬移过来的，所以时间上可能存在混乱，希望大家见谅！　　本文主要讲解Linux的用户设置、主机名设置、网络配置、防火墙配置 用户传输包的命令lrzsz的安装以及SSH服务配置等基本操作。1. 用户名设置　　服务肯定是为了用户，而用户可能对于Linux并不了解，比如刚开始学习的你们。而刚新建的虚拟机里只有管理员用户root，其权限是非常高的，可以进行很多普通用户无法进行的操作。

错误日志如下：[hadoop@master zookeeper-3.4.5-cdh5.10.0]$ cat zookeeper.out2018-05-15 01:29:21,036 [myid:] - INFO[main:QuorumPeerConfig@101] - Reading configuration from: /opt/modules/zookeeper-3.4.5-cdh5...

Linux环境下安装ns2的有效过程及Can't locate getopts.pl in @INC (@INC contains: /etc/perl xxxx) 错误分析和解决