Hadoop可配置参数详解配置文件名配置对象主要内容core-site.xml集群全局参数用于定义系统级别的参数，如HDFSURL、Hadoop的临时目录等hdfs-site.xmlHDFS参数如名称节点和数据节点的存放位置、文件副本的个数、文件读取权限等mapred-sit..

1、zookeeper集群的配置<1>解压安装包并重命名tar -zxvf zookeeper-3.4.14.tar.gzmv zookeeper-3.4.14/ zookeeper<2>修改配置文件zoo.cfgcp zoo_sample.cfg zoo.cfgvim zoo.cfgdataDir用于配置zookeep...

1、Kafka的bin目录下的每一个脚本工具，都有着众多的参数选项，我们不可能记住每一个选项，以及其功能。通常这些脚本都可以使用--help参数来打印列出其所需的参数信息，或者直接运行./kafka-topics.sh 查看帮助（--help）2、kafka 创建主题的时候其副本个数不能大于broker的个数，否则创建主题 topic 失败详细报错信息见上图，其中红色框注明了其副本个数已经超过了可

简介Kafka默认是没有web界面的，需要自己安装web界面监控工具可以使用三方开源的监控工具，查询了些资料，网上流传最多的有三个监控工具：Kafka Web ConsloleKafka ManagerKafkaOffsetMonitor（其中Kafka Web Conslole程序运行后，会定时去读取kafka集群分区的日志长度，读取完毕后，连接没有正常释放，一段时间后产生大量的socket连接

文章目录一、数仓分层数仓概念ODS（原始数据层）做了哪些事DWD（明细数据层）做了哪些事DWS（服务数据层）做了哪些事DWT（主题数据层）做了哪些事ADS（应用数据层）做了哪些事二、数仓建模常用的建模工具ODS 层DWD 层DWS 层DWT 层ADS 层一、数仓分层数仓概念什么是数仓：数据仓库是为企业所有决策制定过程，提供所有系统数据支持的战略集合。通过对数据仓库中数据的分析，可以帮助企业改进业务

文章目录一、数仓分层数仓概念ODS（原始数据层）做了哪些事DWD（明细数据层）做了哪些事DWS（服务数据层）做了哪些事DWT（主题数据层）做了哪些事ADS（应用数据层）做了哪些事二、数仓建模常用的建模工具ODS 层DWD 层DWS 层DWT 层ADS 层一、数仓分层数仓概念什么是数仓：数据仓库是为企业所有决策制定过程，提供所有系统数据支持的战略集合。通过对数据仓库中数据的分析，可以帮助企业改进业务