python应用GUI开发系列：python利用PyQt5和QTDesginer开发GUI应用(一)、环境准备及demopython利用PyQt5和QTDesginer开发GUI应用(二)、股票查询工具---------------------------------------------------------------------------------------------...

impala数据血缘与数据地图系列：1. 解析impala与hive的血缘日志2. 实时采集impala血缘日志推送到kafka-----------------------------------------实时采集impala血缘日志推送到kafka-----------------------------------------------------使用filebeat采集...

本篇是kafka系列的第五篇，介绍kafka配置安全认证SASL以及ACL权限控制，并使用控制台和python访问开启了SASL认证的kafka集群。

当YARN开启了HA之后，我们想要知道两个ResourceManager中哪台是ACTIVE，哪台是STANDBY状态，可以通过下面的方式来获取或切换它们的状态。

trans_array用于将一行数据转为多行的UDTF，将列中存储的以固定分隔符格式分隔的数组转为多行。命令格式trans_array (num_keys, separator, key1,key2,…,col1, col2,col3) as (key1,key2,…,col1, col2)参数说明● num_keys: bigint类型常量，必须>=0。在转为多行时作为转置key的列的个数

Influxdb是目前最流行的时序数据库，排名如下图所示，本文就介绍如何安装influxdb1.1.0以及1.8.0版本，以及如何开启web界面。为何要安装两个版本？ 因为influxdb从1.1.0版本之后就没有web页面了，但我们可以使用1.1.0版本的web页面访问1.8.0的数据库。下载：官网：https://portal.influxdata.com/downloads/官网只提供最新版

上一篇讲了如何使用Logstash监控nginx日志并打印到控制台或导入到ES中，在kibana的discover中我们可以根据@timestamp时间对数据进行过滤和排序，但这里显示的@timestamp时间是指logstash读取到日志的时间而不是日志真正产生的时间，本篇就介绍如何配置使logstash在采集日志的过程中使用日志的真实时间戳作为消息体的时间戳，便于我们之后的分析ELK系列(一)

今天用虚拟机离线安装CDH6集群，现在CDP7已经出了，但没有社区版了，CDP7装起来只能用个60天，相比于CDH6的组件只有hive和spark进行了大版本更新以及加入几个新的组件，所以这里还是装CDH6，主要还是因为好久以前就下好了parcel包。。。

有一些脚本或命令在执行的时候会占据屏幕，当关掉终端时该命令就被杀掉了，有时候我们想让它们在后台执行，甚至想要在执行之后获得他的pid以便于追踪它的执行状况，可以使用下面的方式

通常我们在执行shell脚本的时候会遇到类似下面的错误，而事实上脚本没有任何问题，很多人会卡在这一步很久，其实有可能是编码导致的回车符不一致引起的