CentOS配置SSH免密码登录为例说明：SSH远程登录的安全外壳协议有两种身份认证机制：- 用户名+密码-密钥登录环境准备host1：192.168.0.10host2：192.168.0.11下面以host1 ssh免密码登录到host2为例，进行说明1、在host1主机下生成私钥/公钥对执行如下命令一直回车即可。[u

启动hbase后，在hbase shell 中运行如下命令报错：注意：我使用的不是hbase自带的zookeeper。是自己搭建的一个zookeeper集群。且export HBASE_MANAGES_ZK=true这句话已被注释掉。1、运行命令：      hbase(main):001:0> list2、报错信息：ERROR: Can't get master addr

端口Hadoop集群的各部分一般都会使用到多个端口，有些是daemon之间进行交互之用，有些是用于RPC访问以及HTTP访问。而随着Hadoop周边组件的增多，完全记不住哪个端口对应哪个应用，特收集记录如此，以便查询。这里包含我们使用到的组件：HDFS, YARN, HBase, Hive, ZooKeeper:组件节点默认端口配置用途说明

本文主要介绍如何配置和使用Greenplum-Kafka集成1.介绍Greenplum-Kafka集成使用Greenplum Stream Server来提供从Apache Kafka到Greenplum数据库的高速并行数据加载入库。Greenplum-Kafka集成包括gpkafka工具，gpkafka工具是kafka的comsumer。gpkafka支持两个命令：gpkafka...

简介：Greenplum流服务器(GPSS)管理客户端(如：Greenplum- Kafka )和Greenplum数据库之间的通信和数据传输。在使用该服务将数据加载到Greenplum数据库之前，必须先配置并启动GPSS实例。1. 安装前准备条件Greenplum流服务器gpss和gpsscli命令行工具，在安装Greenplum数据库版本5.16及其以上版本时，已自动安装在其中，无需进...

1.greenplum入库方式总结greenplum目前主要使用到的入库方式有如下4种：使用insert into方式入库使用gpss方式入库使用gpkafka方式入库使用gpcopy方式入库2.以上入库方式优缺点及性能对比详细优缺点及性能对比如下：入库方式优点缺点入库性能...

HAWQ安装PXF插件1、下载git clone https://git-wip-us.apache.org/repos/asf/incubator-hawq.git2、编译pxfcd incubator-hawq/pxfmake3、安装PXF创建pxf安装目录：mkdir -p /opt/pxfcd incubator-hawq/pxfexport PXF_HOME=/opt/pxfm

本文主要介绍：Hibench的使用以及Hibench测试相关配置一、安装Hibench1、下载Hibenchwget https://github.com/intel-hadoop/HiBench/archive/HiBench-7.0.zip2、编译所有模块（注意：编译前，确保系统中已经安装好了maven）命令：mvn -Dspark=2.1 -Dscala=2.11 clean package