昨天在WEBUI中修改了Ambari集群中的一些配置想在linux上查看是否同步，找了半天没找到配置文件在什么位置，今天找到了，发出来希望可以帮助到大家，因为感觉里面的配置文件挺多挺乱的 1.Ambari安装Hive组件，配置文件在/etc/hive/2.6.5.0-292/02.Ambari安装Hadoop组件在/etc/hadoop/2.6.5.0-292/03.安装的组件...

1. 前言消息堆积是消费滞后(Lag)的一种表现形式，消息中间件服务端中所留存的消息与消费掉的消息之间的差值即为消息堆积量，也称之为消费滞后(Lag)量。对于Kafka而言，消息被发送至Topic中，而Topic又分成了多个分区(Partition)，每一个Partition都有一个预写式的日志文件，虽然Partition可以继续细分为若干个段文件(Segment)，但是对于上层应用来说可以将..

错误日志：ERROR[ReplicaFetcherreplicaId=0,leaderId=2,fetcherId=0]ExitingbecauselogtruncationisnotallowedforpartitionIRT_Dev_HeartBeat-18,currentleader'slatestoffset45479islesstha...

        在新版本Kafka中，__consumer_offsets这个topic是存放消费者偏移量的，但是该主题默认配置副本数量只有1，容易造成单点故障，我们可以动态修改（无需重启服务）副本因子，提高kafka的可靠性 修改流程----------------------------------------------------------------------------...

1.控制台报错：2019-02-19 10:36:06.868 ERROR 2272 --- [kafka-producer-network-thread | producer-1] o.s.k.support.LoggingProducerListener    : Exception thrown when sending a message with key='8677260313644..

1. 需求引入在大数据生态圈中有很多的技术，每一个技术的使用和管理都有自己的规范，例如hdfs操作有相关的插件，mr任务的监控有相关的页面，hbase的操作也有相对应的页面，那么这些零零散散的管理页面能否统一到一个软件中进行管理呢？2. hue的简介2.1. hue概述Hue是一个开源的Apache Hadoop UI系统，由Cloudera Desktop演化而来，最后Cloudera公...

我们有一个master 分支，当工程要新增新的功能时，又暂时不上线，那么我们可以新建一个新的本地分支，和对应的远程分支，完成之后，上线时再合并就可以了1.查看一下本地分支git branch;查看本地和远程的所有分支git branch -a2.新建一个本地的分支git branch -b newbranch//这个命令是新建一个分支，...

K8S Node节点报错The connection to the server localhost:8080 was refused - did you specify the right host or port?今天在Kubernetes的从节点上运行命令【kubectl】出现了如下错误[root@k8snode1 kubernetes]# kubectl get podThe connec

一、安装依赖环境输入命令：yum -y install zlib-devel bzip2-devel openssl-devel ncurses-devel sqlite-devel readline-devel tk-devel gdbm-devel db4-devel libpcap-devel xz-devel二、下载Python31.进入opt文件目录下，cd opt/2.下载python