上周服务器意外重启了一次 没有关闭azkaban ，周一开发反馈无法执行任务排查了一下azkaban-exec-server 没有什么报错 然后排查azkaban-web-server ，发现azkaban 一直在尝试连接某个端口java.util.concurrent.ExecutionException: org.apache.http.conn.HttpHostConnectExceptio

首先下载包，有源码和预编译两种包 。我这用的预编译下载 | Apache Doris我的架构是3FE+7BE首先操作系统安装要求#设置系统最大打开文件句柄数时钟同步Doris 的元数据要求时间精度要小于5000ms，所以所有集群所有机器要进行时钟同步，避免因为时钟问题引发的元数据不一致导致服务出现异常。#关闭交换分区（swap）Linux交换分区会给Doris带来很严重的性能问题，需要在安装之前禁

准备工作hadoop版本：3.0.0-cdh6.3.2hive版本：hive-2.1.1linux环境:centos7.6jdk1.8maven-3.6以上protobuf-2.5.0.tar.gz(只能是这个版本,用外网下载Releases · protocolbuffers/protobuf · GitHubtez-0.9.2源码Apache Downloads...

我们可以通过linkMergeSlash将挂载表的根与另一个文件系统的根合并。在下面的挂载表配置中，ClusterY 的根目录与位于hdfs://nn1-clustery.example.com:8020的根文件系统合并。第一种挂载方式是经典的viewfs挂载方式，viewfs实际上提供了一种映射关系，将一个全局（逻辑）目录映射到某个具体的namenode（物理）目录上。这个集群里的文件夹都来自各

1. Java.lang.IllegalStateException: No Executor found. Please make sure to export the HADOOP_CLASSPATH environment variable or have hadoop in your classpath. For more information refer to the "Deploym

Hadoop 默认所有人均可访问操作，这个漏洞可以通过设置“安全访问参数”堵上。2. 解决思路和方法首先要设置 hadoop.security.authorization = true 开启ServiceLevel Authorization：保存后，重启 hdfs 服务即可还有，别指望用命令行来处理。。。CM 是个黑盒，很多配置都是直接从数据库读取(页面配置存入数据库而不是配置文件)，然后动态生

1.1 概要介绍Flink on Yarn的HA高可用模式，首先依赖于Yarn自身的高可用机制（ResourceManager高可用），并通过Yarn对JobManager进行管理，当JobManager失效时，Yarn将重新启动JobManager。其次Flink Job在恢复时，需要依赖Checkpoint进行恢复，而Checkpoint的快照依赖于远端的存储：HDFS，所以HDFS也必须是高

环境准备1台centos6操作系统主机，关闭selinux及iptables官方下载elasticsearch6.0软件包：https://artifacts.elastic.co/...官方下载java1.8软件包：http://www.oracle.com/technet...系统配置创建elasticsearch账户用于启动elasticsearch服务[root@elasticsearch

准备工作tez-0.9.2源码包mvn安装就不提了protobuf安装安装tez0.9.2修改几处配置编译完之后到tez-dist/target 下查看整合到hdfshive使用lzo压缩后,解决tez和spark不能用的问题...

mongdb官方文档有点语焉不详 网上的流程没有关于开启了认证或者分片模式的 特记录如下mongodb默认情况下是不开启慢查询的 需要开启慢查询的话可以在启动命令后面添加参数--profile 1 --slowms 3000完整的命令就像这样mongod -f /data/mongodb-4.2.8/conf/shard3.conf --profile 1 --slowms 3000--profi