5 运算符5.1 ==equal()eq()object Test {def main(args: Array[String]): Unit = {var a1 = "abc"var a2 = "abc"println(a1 == a2) // trueval a3 = new String("abc")val a4 = new String("abc")println(a3 == a4) //

1 Hive基本概念hive是什么？hive是基于hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张表，并且提供类SQL的查询功能。其本质是将HQL转化成MapReduce程序。hive处理的数据存储在HDFS，hive的底层数据分析实现是MapReduce，程序运行在Yarn上。2 Hive安装部署2.1 安装mysql步骤1：centos7卸载mariadbrpm -qa | g

Python数据可视化1 柱状图普通柱状图基本语法plt.bar(x, data, tick_label= , label= , bottom= , color= , width= )# x:所有柱子的下标列表，可以是list(range(5))，也可以是numpy.arange(5)数组# data：数据列表# tick_label:每个柱子标签列表，['G1', 'G2', 'G3', 'G4

5 hadoop3集群配置步骤1：配置nodepad++，可以在windows系统下修改linux内的文件。步骤2：集群规划hadoop102hadoop103hadoop104namenodesecondrynamenodedatanodedatanodedatanoderesourcemanagernodemanagernodemanagernodemanager步骤3：在hadoop102上

1 Spark内核概述Spark内核泛指Spark的核心运行机制，包括Spark核心组件的运行机制、Spark任务调度机制、Spark内存管理机制、Spark核心功能的运行原理。1.1 Spark核心组件（1）Yarn（RM & NM）（2）Spark（AM & Driver & Executor）①DriverSparK驱动器节点，用于执行Spark任务中的main方法，

1 Spark内核概述Spark内核泛指Spark的核心运行机制，包括Spark核心组件的运行机制、Spark任务调度机制、Spark内存管理机制、Spark核心功能的运行原理。1.1 Spark核心组件（1）Yarn（RM & NM）（2）Spark（AM & Driver & Executor）①DriverSparK驱动器节点，用于执行Spark任务中的main方法，

1.1 DataX下载地址http://datax-opensource.oss-cn-hangzhou.aliyuncs.com/datax.tar.gz1.2 安装DataX步骤1：使用wget命令，采用阿里云地址下载[root@hadoop201 software]# wget http://datax-opensource.oss-cn-hangzhou.aliyuncs.com/data

9 集合Scala的集合有三大类：序列Seq、集Set、映射Map，所有集合都扩展自Iterable特质。对于所有的集合类，Scala都同时提供了可变和不可变的版本。可变集合和不可变集合使用包名区分：scala.collection.immutablescala.collection.mutable可变不可变数组ArrayArrayBuffer序列（List）Seq、ListListBuffer集

Python数据可视化1 柱状图普通柱状图基本语法plt.bar(x, data, tick_label= , label= , bottom= , color= , width= )# x:所有柱子的下标列表，可以是list(range(5))，也可以是numpy.arange(5)数组# data：数据列表# tick_label:每个柱子标签列表，['G1', 'G2', 'G3', 'G4

1.3 DataX执行的json文件解析{job://最外侧，任务setting:{//设置speed:{//速度channel:3//指定用几个子线程去跑这个任务，线程越多，速度越快content:{//内容reader:{//读数据部分name:"hdfsreader"//指明什么类型的reader，hdfsreader读HDFSparameter:{//参数pa