hadoop.tmp.dir的目录默认指向的是：/tmp/hadoop-${USERNAME}这样会有个问题，系统重启时会自动删除/tmp目录下的文件，导致你之前对hadoop做的很多操作都被删除了，需要重新再来，比如你想hdfs导入的文件会都被删除。这是你需要修改 ${hadoop_home}/etc/hadoop/core-site.xml文件，添加一个名字为"hadoop.tmp.

1、大数据概述大数据是指无法在一定时间内使用传统的数据库软件工具对其内容进行抓取、管理和处理的数据集合。有5V+1C的特性2、hadoop背景google提出的两个处理抓取网页数据的解决方案：1】分布式文件系统(GFS)：处理海量网页的存储-----引申出HDFS2】分布式技算框架MAPREDUCE：处理海量网页的索引----引申出MAPREDUCE最终独立出HADOO...

一、重温1、算子/函数/API2、读取文件（1）FileFrom3、模式匹配（1）teacher（2）异常捕获（3）偏函数（4）其他函数：颗粒化currying、字符串插值 $二、隐式转换（能不用就不用，可能你能cover住，但是你的小伙伴不一定能接住）1、类，添加一个方法可以用继承、装饰代理：静态代理：继承动态代理：JDK...

一、重温1、产生背景2、部署（没有集群的概念，它仅仅是客户端）3、DDL4、DML5、JOIN6、function：build-in & udf7、Sqoop二、Hive高级1、hive cli：1）hive/webui/beeline/Java API2、看官网https://cwiki.apache.org/confluence/displ...