linux安装mysql服务分四种安装方法：一.源码安装，优点是安装包比较小，只有十多M，缺点是安装依赖的库多，安装编译时间长，安装步骤复杂容易出错；二.使用官方编译好的二进制文件安装，优点是安装速度快，安装步骤简单，缺点是安装包很大，300M左右。三.yum安装四.rpm安装安装方法一：请看我的另一篇文章：mysql源码脚本安装安装方法二：（Redh...

文章目录一、前言二、简单实例一、前言  TF-IDF（term frequency–inverse document frequency，词频-逆向文件频率）是一种用于信息检索（information retrieval）与文本挖掘（text mining）的常用加权技术。  TF-IDF是一种统计方法，用以评估一字词对于一个文件集或一个语料库中的其中一份文件的重要程度。字词的重要性随着它在文件中

1.Ctrl+D: 删除当前行2.Ctrl+Alt+↓: 复制当前行到下一行(复制增加)3.Ctrl+Alt+↑: 复制当前行到上一行(复制增加)4.Alt+↓: 当前行和下面一行交互位置(特别实用,可以省去先剪切,再粘贴了)5.Alt+←: 前一个编辑的页面6.Alt+→: 下一个编辑的页面7.Alt+/: 代码提示、自动补全（输入syso后再按Alt+/可迅速打出Sys...

文章目录一、前言二、调度器的选择三、Ambari2.7.4+HDP3.1.4.0中配置fair-scheduler一、前言  理想情况下，我们应用对Yarn资源的请求应该立刻得到满足，但现实情况资源往往是有限的，特别是在一个很繁忙的集群，一个应用资源的请求经常需要等待一段时间才能的到相应的资源。在Yarn中，负责给应用分配资源的就是Scheduler。其实调度本身就是一个难题，很难找到一个完美的策

文章目录一、小文件定义二、为什么会有小文件1.数据迁移过程中：2.处理源头文件：3.处理过程中产生：三、小文件给Hadoop集群带来的瓶颈问题四、如何解决小文件1.Hadoop中：一、小文件定义  小文件是指文件大小明显小于 HDFS 上块（block）大小（Hadoop1.x中默认64MB，在Hadoop2.x中默认为128MB）的文件。二、为什么会有小文件  Hadoop中的目录、文件、blo

  K8sPodExample.java：  K8sPodApp.java：  K8sJobSubmitter.java：  K8sJobSubmitterExample.java：  config：注：K8s 认证信息可在服务器上查看

linux安装mysql服务分四种安装方法：一.源码安装，优点是安装包比较小，只有十多M，缺点是安装依赖的库多，安装编译时间长，安装步骤复杂容易出错；二.使用官方编译好的二进制文件安装，优点是安装速度快，安装步骤简单，缺点是安装包很大，300M左右。三.yum安装四.rpm安装安装方法一：请看我的另一篇文章：mysql源码脚本安装安装方法二：（Redh...

linux安装mysql服务分四种安装方法：一.源码安装，优点是安装包比较小，只有十多M，缺点是安装依赖的库多，安装编译时间长，安装步骤复杂容易出错；二.使用官方编译好的二进制文件安装，优点是安装速度快，安装步骤简单，缺点是安装包很大，300M左右。三.yum安装四.rpm安装安装方法一：请看我的另一篇文章：mysql源码脚本安装安装方法二：（Redh...

文章目录一、参数调优1.严格模式：2.Fetch Task功能：3.reduce个数控制：4.map join：二、语法层面调优1.order by和sort by：2.cluster by和distribute by：3.执行计划Explain：一、参数调优1.严格模式：  在hive里面可以通过严格模式防止用户执行那些可能产生意想不到的查询,从而保护hive的集群。在严格模式下，用户在运行如下

文章目录一、hadoop fs命令二、yarn相关命令一、hadoop fs命令查看文件内容，配合more：hadoop fs -cat /in/hadoop-hadoop-namenode-h71.log | more统计hdfs中文件的行数：hadoop fs -cat /in/hadoop-hadoop-namenode-h71.log | wc -l 输出：16509查看hdfs中文件的前