一.Hadoop概述1.1 Hadoop简要概述我们生活在这个数据大爆炸的时代 ，很难估算全球电子设备中存储的数据总共有多少 。当前一个中小型公司的数据量也达到数十TB，甚至更多。有句话说得好 ：“ 大数据胜于好算法 。” 意思是说对于某些应用 （譬如根据以往的偏好来推荐电影和音乐），不论算法有多牛 ，基于小数据的推荐效果往往都不如基于大量可用数据的 一般算法的推荐效果 。我们遇到的问题很简单：在

文章目录一.Yarn简介二.Yarn基本服务组件三.Yarn工作的过程参考一.Yarn简介在古老的 Hadoop1.0 中，MapReduce 的 JobTracker 负责了太多的工作，包括资源调度，管理众多的 TaskTracker 等工作。这自然是不合理的，于是 Hadoop 在 1.0 到 2.0 的升级过程中，便将 JobTracker 的资源调度工作独立了出来，而这一改动，直接让 Ha

文章目录一.检查和安装与Perl相关的模块二.下载和安装percona toolkit的包2.1 下载和安装percona toolkit的包2.2 安装percona-toolkit工具包2.3 percona-toolkit工具介绍2.3.1 pt-archiver(归档表)2.3.2 pt-online-schema-change(在线修改表结构)2.3.3 pt-table-checksu

文章目录一.Windws系统二.Linux系统1.service命令2. /etc/init.d/mysql3.mysqld命令4.mysqld_safe命令5.mysqld_multi命令6.mysqladmin命令7.杀进程8.总结备注:测试数据库版本为MySQL 8.0这个blog我们来聊聊MySQL的启动和关闭命令一.Windws系统--启动MySQLnet start mysql-- 关

概述:Oracle scott用户下四张表1.部门表--dept2.员工表--emp3.工资等级表--salgrade4.奖金表--bonusdept-- Create tablecreate table DEPT(deptno NUMBER(2) not null,dnameVAR...

备注:Hive 版本 2.1.1文章目录一. HPL/SQL概述二.HPL/SQL测试案例2.1 测试执行简单sql2.2 测试函数和循环2.3 测试include套用存储过程2.4 测试package2.4 测试游标2.5 测试游标2参考一. HPL/SQL概述Hive 2.0版本开始，已经有了Hive存储过程的解决方案（HPL/SQL –Procedural SQL on hadoop）。该解

文章目录一.Hive简介二.Hive的特点三.Hive使用场景四.Hive命令五.Hive参数5.1 Hivevar参数示例5.2 Hiveconf参数示例5.3 System变量5.4 Env变量六.Hive系统架构6.1 Hive接口6.2 元数据存储6.3 驱动器（Driver）一.Hive简介Hive是基于Hadoop的一个数据仓库工具。可以将结构化的数据文件映射为一张数据库表，并提供简单

备注:测试数据库版本为MySQL 8.0一.需求计算本月的一天及最后一天二.解决方案通过day函数求出本月的天数通过adddate减去上一步的天数 + 1 即可以求出本月的第一天通过last_day即可求出本月的最后一天select adddate(current_date,-day(current_date)+1) frist_day,last_day(current_date) last_da

文章目录一. 数组的冒泡排序1.1 图解说明数组的冒泡排序1.2 代码实现二. Arrays工具类参考:一. 数组的冒泡排序冒泡排序 ：相邻的两个元素两两比较,元素值较大的元素依次向后置换.冒泡排序的基本原理：  相邻元素两两比较，大的往后放。  第一次比较，比较完毕后，最大值就出现在了最大索引处。  第二次比较，比较完毕后，次最大值就出现在了次最大索引处  …  最终我们得到了一个排序好的数组交

备注:Hive 版本 2.1.1文章目录一.Hive SELECT（数据查询语言）概述二.Select的几个简单例子2.1 表别名2.2 字段值的计算2.3 字段别名2.4 LIMIT2.5 FROM子查询2.6 case when 判断2.7 where过滤2.8 group by分组2.9 Having子句三.Hive的join3.1 内连接 --求交集3.2 左连接 --求A的全部3.3 左