一.Hadoop概述1.1 Hadoop简要概述我们生活在这个数据大爆炸的时代 ，很难估算全球电子设备中存储的数据总共有多少 。当前一个中小型公司的数据量也达到数十TB，甚至更多。有句话说得好 ：“ 大数据胜于好算法 。” 意思是说对于某些应用 （譬如根据以往的偏好来推荐电影和音乐），不论算法有多牛 ，基于小数据的推荐效果往往都不如基于大量可用数据的 一般算法的推荐效果 。我们遇到的问题很简单：在

文章目录一.Yarn简介二.Yarn基本服务组件三.Yarn工作的过程参考一.Yarn简介在古老的 Hadoop1.0 中，MapReduce 的 JobTracker 负责了太多的工作，包括资源调度，管理众多的 TaskTracker 等工作。这自然是不合理的，于是 Hadoop 在 1.0 到 2.0 的升级过程中，便将 JobTracker 的资源调度工作独立了出来，而这一改动，直接让 Ha

文章目录一.检查和安装与Perl相关的模块二.下载和安装percona toolkit的包2.1 下载和安装percona toolkit的包2.2 安装percona-toolkit工具包2.3 percona-toolkit工具介绍2.3.1 pt-archiver(归档表)2.3.2 pt-online-schema-change(在线修改表结构)2.3.3 pt-table-checksu

文章目录一.Windws系统二.Linux系统1.service命令2. /etc/init.d/mysql3.mysqld命令4.mysqld_safe命令5.mysqld_multi命令6.mysqladmin命令7.杀进程8.总结备注:测试数据库版本为MySQL 8.0这个blog我们来聊聊MySQL的启动和关闭命令一.Windws系统--启动MySQLnet start mysql-- 关

文章目录一.Django入门1.1 建立项目1.1.1 制定规范1.1.2 建立虚拟环境1.1.3 安装virtualenv1.1.4 激活虚拟环境1.1.5 安装Django1.1.6 在Django中创建项目1.1.7 创建数据库1.1.8 查看项目1.2 创建应用程序1.2.1 定义模型1.2.2 激活模型1.2.3 Django管理网站1.2.4 定义模型Entry1.2.5 迁移模型En

文章目录一.while循环简介1.1 使用while 循环1.2 让用户选择何时退出1.3 使用标志1.4 使用break 退出循环1.5 在循环中使用continue二.使用while 循环来处理列表和字典2.1 在列表之间移动元素2.2 删除包含特定值的所有列表元素2.3 使用用户输入来填充字典参考:一.while循环简介for 循环用于针对集合中的每个元素都一个代码块，而while 循环不断

概述:Oracle scott用户下四张表1.部门表--dept2.员工表--emp3.工资等级表--salgrade4.奖金表--bonusdept-- Create tablecreate table DEPT(deptno NUMBER(2) not null,dnameVAR...

备注:Hive 版本 2.1.1文章目录一. HPL/SQL概述二.HPL/SQL测试案例2.1 测试执行简单sql2.2 测试函数和循环2.3 测试include套用存储过程2.4 测试package2.4 测试游标2.5 测试游标2参考一. HPL/SQL概述Hive 2.0版本开始，已经有了Hive存储过程的解决方案（HPL/SQL –Procedural SQL on hadoop）。该解

文章目录一.Hive简介二.Hive的特点三.Hive使用场景四.Hive命令五.Hive参数5.1 Hivevar参数示例5.2 Hiveconf参数示例5.3 System变量5.4 Env变量六.Hive系统架构6.1 Hive接口6.2 元数据存储6.3 驱动器（Driver）一.Hive简介Hive是基于Hadoop的一个数据仓库工具。可以将结构化的数据文件映射为一张数据库表，并提供简单

备注:测试数据库版本为MySQL 8.0一.需求计算本月的一天及最后一天二.解决方案通过day函数求出本月的天数通过adddate减去上一步的天数 + 1 即可以求出本月的第一天通过last_day即可求出本月的最后一天select adddate(current_date,-day(current_date)+1) frist_day,last_day(current_date) last_da