1 下载elasticsearch-6.6.0[liucf@node1 softfile]$wget https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-6.6.0.tar.gz[liucf@node1 softfile]$wget https://artifacts.elastic.co/downloads/ela

1 下载hive安装包http://ftp.twaren.net/Unix/Web/apache/hive/hive-3.1.2/apache-hive-3.1.2-bin.tar.gz2 上传解压[liucf@node1 softfile]$ tar -zxf apache-hive-3.1.2-bin.tar.gz -C ../soft修改一下解压后的文件目录名，是自己看着舒服点，可以不做[l

1 无分区表1.1准备无分区表和数据创建表无分区表CREATE TABLE IF NOT EXISTS test_hive_tb1 (id BIGINT, name STRING) ;插入2条数据INSERT INTO TABLE test_hive_tb1 VALUES(100001,"lisi");INSERT INTO TABLE test_hive_tb1 VALUES(100002,"w

1 下载https://downloads.mysql.com/archives/cluster/2检查系统总是否原有mysql如果有删除[liucf@node1 ~]$ rpm -qa | grep mysql[liucf@node1 ~]$3 上传解压mysql tar 包[liucf@node1 softfile]$ tar -xvf mysql-cluster-community-7.6.

1 查卡我的hadoop支撑的压缩方式hdfs 配置控制台收索：io.compression.codecs可见没有LzopCodec方式2LzoCodec和LzopCodec区别LzoCodec和LzopCodec区别两种压缩编码LzoCodec和LzopCodec区别：1. LzoCodec比LzopCodec更快， LzopCodec为了兼容LZOP程序添加了如 bytes signature

1 下载依jar备用hive-jdbc-uber-2.6.5.0-292.jar2 删除intellij 原有jar3 添加自己下载的driver包hive-jdbc-uber-2.6.5.0-292.jar4 配置HiveServer2点击 “+”号输入自定义名称，hiveservice2 所在主机ip，hiveserver2端口号，登录主机的用户名和密码点击ok后5 配置显示的hive库默认只

您使用的所有表都是由数据库引擎所提供的默认情况下，ClickHouse使用自己的数据库引擎，该引擎提供可配置的表引擎和所有支持的SQL语法.除此之外，您还可以选择使用以下的数据库引擎：MySQL

sparkSQL 读取hive表数据时候报如下错误我的语句很简单如下：val df: DataFrame = sqlContext.sql("select vipId,brandId,dt from pro60050.browse_wxapp_page_dt_partition where dt >= 20200227and brandId = 253")df.show()...

我们遇到这样一个问题，1 先生成一个包含所有预置字段的DataFrame（此时的字段名称是英文的）2 根据传入的条件动态组合字段从1中的大的DataFrame 里 select的到想要的字段3 但是我想存入的csv文件中要有中文表头4 遇到的问题是：使用sql 拼接然后as 取别名为中文，会报出不支持所以想到如下的方法来解决：package ezr.df.drilli...

1 系统环境：[root@ds2 docker]# cat /etc/redhat-releaseCentOS Linux release 7.8.2003 (Core)2 docker版本：[root@ds2 docker]# docker versionClient:Version:1.13.1API version:1.26Package version: docker-1.13.1-162