logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

Mysql5.7 ,Linux 环境安装

Mysql5.7 ,Linux 环境安装1、下载mysql-5.7.8-rc-linux-glibc2.5-x86_64.tar.gz链接:https://pan.baidu.com/s/1z4z8g6hzJWtNSqX96HxR8Q提取码:mkp82、解压安装包:进入安装包所在目录,执行命令:tar -xzvf mysql-5.7.8-rc-linux-glibc2.5-...

Hadoop3.2.0 编写YARN应用程序

目的概念和流程接口编写一个简单的YARN应用程序写一个简单的客户端编写ApplicationMaster(AM)常问问题如何将应用程序的jar分发给需要它的YARN集群中的所有节点?我如何获得ApplicationMaster的ApplicationAttemptId?为什么我的容器被NodeManager杀死了?如何包含本机库?有用的链...

微服务架构下的事务一致性保证

今天我给大家分享的题目是微服务架构下的事务一致性保证。主要内容包括4部分:传统分布式事务不是微服务中一致性的最佳选择微服务架构中应满足数据最终一致性原则微服务架构实现最终一致性的三种模式对账是最后的终极防线。我们先来看一下第一部分,传统使用本地事务和分布式事务保证一致性传统单机应用一般都会使用一个关系型数据库,好处是应用可以使用 ACID transa...

Apache NiFi系统管理员指南 [ 一 ]

如何安装和启动NiFi端口配置NiFi嵌入式Zookeeper配置最佳实践安全配置TLS生成工具包用户认证轻量级目录访问协议(LDAP)Kerberos的OpenId ConnectApache Knox多租户授权授权人配置Authorizers.xml安装程序Apache NiFi团队dev@nifi.apache.org...

Hadoop3.2.0 YARN资源配置

概观YARN支持可扩展的资源模型。默认情况下,YARN会跟踪所有节点,应用程序和队列的CPU和内存,但资源定义可以扩展为包含任意“countable”资源。可数资源是在容器运行时消耗的资源,但之后会释放。CPU和内存都是可数资源。其他示例包括GPU资源和软件许可证。此外,YARN还支持使用“resource profiles”,允许用户通过单个配置文件指定多个资源请求,类似于Amazon ...

Hadoop3.2.0 HDFS HA ( Quorum Journal Manager )

目的注意:使用Quorum Journal Manager或常规共享存储背景架构硬件资源部署配置概述配置细节部署细节管理命令负载均衡器设置自动故障转移介绍组件部署ZooKeeper在你开始之前配置自动故障转移在ZooKeeper中初始化HA状态使用start-dfs.sh启动集群手动启动集群...

Apache Hadoop 3.2.0 官方API常规 : 概览

Apache Hadoop 3.2.0Apache Hadoop 3.2.0在之前的稳定次要版本(hadoop-3.1)中包含了许多重要的增强功能。这是3.2版本系列中的第一个版本,尚未普遍可用(GA)或生产就绪。概观建议用户阅读完整的发行说明。此页面提供了主要更改的概述。YARN中的节点属性支持节点属性有助于根据节点标记节点上的多个标签,并支持根据这些标签的表达式放置容器...

#java#hadoop#大数据
Hadoop3.2.0 HDFS HA ( NFS)

目的注意:使用Quorum Journal Manager或常规共享存储背景建筑硬件资源部署配置概述配置细节部署细节管理命令自动故障转移介绍组件部署ZooKeeper在你开始之前配置自动故障转移在ZooKeeper中初始化HA状态使用start-dfs.sh启动集群手动启动集群保护对ZooKeep...

Hadoop3.2.0 YARN 容量调度程序

Hadoop:容量调度程序目的概观特征配置设置ResourceManager以使用CapacityScheduler设置队列队列属性设置应用程序优先级。Capacity Scheduler容器抢占预订属性使用CapacityScheduler配置ReservationSystem叶子队列的动态自动创建和管理其他属性查看Cap...

[官方Flink进阶笔记 ] 四、Flink on Yarn/K8s 原理剖析及实践

-----------------------------------------一 .Flink 架构概览1.1. Job1.2. JobManager1.3. TaskManager1.4. Flink 运行时相关组件二 .Flink on Yarn 原理及实践2.1. Yarn 架构原理–总览2.2. Yarn 架构原理–组件2.3. Yarn 架构原理–交互2.4. Flink on Ya

    共 37 条
  • 1
  • 2
  • 3
  • 4
  • 请选择