logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

【Ambari Plus】Step5—Nginx 本地 Yum 文件服务

本文介绍了如何配置Nginx作为本地YUM文件服务,为Ambari Plus安装包提供HTTP访问。主要内容包括:在核心节点hadoop1.test.com上安装Nginx;设置/data/modules目录权限;配置Nginx站点文件,限制访问IP范围并启用目录索引;测试并启动Nginx服务;放通防火墙端口;最后通过curl验证服务可用性。文章还提供了常见问题排查表,帮助解决403、404等访问

文章图片
#ambari#nginx#hadoop +3
【Ambari Plus】Step6—JDK 双环境准备

摘要: 本文详细介绍了Ambari Plus环境下JDK双环境的配置方法。建议同时安装JDK8(供Stack和大数据组件使用)和JDK17(供Ambari Server使用),避免版本冲突。针对不同架构(aarch64/x86_64)提供了对应的JDK版本建议及下载命令,包含校验步骤确保包完整性。配置内容包括:创建统一目录、设置软链接、配置默认JAVA_HOME指向JDK8、验证版本等操作步骤。同

文章图片
#ambari#java#hadoop +1
【Ambari Plus】Hive 安装

本文详细介绍了Hive的安装配置过程,重点内容包括:1) 使用外部MySQL/MariaDB作为Metastore数据库,并创建专用账号;2) 在三节点集群中合理分配Hive服务角色(Metastore、HiveServer2、WebHCat);3) 全节点部署客户端组件;4) 配置数据库连接参数并进行验证;5) 安装后的服务状态检查。文中强调了生产环境需使用强密码,并提供了安装顺序建议和常见问题

文章图片
#ambari#hive#hadoop +2
【Ambari Plus】11.Kafka 安装

本文介绍了Kafka单节点安装的完整流程,重点针对测试环境配置。内容包括:1)在已有ZooKeeper环境下选择Kafka服务;2)将Broker角色分配到hadoop1.test.com主机;3)检查推荐配置,特别提醒生产环境需调整副本数、日志目录等关键参数;4)提交Kerberos管理员凭据完成认证配置;5)验证安装结果和服务状态。教程强调单Broker仅适用于开发测试,生产环境需部署多节点并

文章图片
#ambari#hadoop#大数据 +2
【Ambari Plus】12.Flink 安装

本文介绍了在YARN环境下安装Flink的步骤,重点说明在Kerberos安全环境中的注意事项。安装过程包括:1)选择Flink服务并检查YARN依赖;2)分配HistoryServer和Client角色;3)配置关键参数如Kerberos认证、端口和归档目录;4)提交管理员凭据完成安装。特别强调Kerberos principal需与YARN本地用户匹配,否则会导致作业提交失败。安装完成后,可通

文章图片
#ambari#flink#hadoop +1
【Ambari Plus】13.Spark 安装

本文介绍了在已有HDFS、YARN、Hive等组件的环境中安装Spark的流程。主要内容包括:1)通过Ambari选择Spark服务并验证依赖;2)分配Spark History Server到hadoop1节点;3)在三台主机上部署Spark Client,并在hadoop1配置ThriftServer;4)检查关键配置项如日志目录等;5)提交Kerberos凭据完成安全认证;6)验证安装结果,

文章图片
#ambari#spark#hadoop +3
【FreeIPA】Ranger Admin LDAP 认证报 Bad credentials 分析

本文介绍了Ranger Admin对接FreeIPA/LDAP认证时常见"Bad credentials"错误的排查方法。重点分析了两种典型错误模式:一是dnpattern拼错DN导致的绑定失败(日志显示"Failed to bind with any user DNs"),二是Base DN/SearchBase配置错误导致的搜索失败(日志显示"

文章图片
#ambari#hadoop
【FreeIPA】Ambari 安装 Ranger 并配置 FreeIPA + LDAP——[Step2]制作 Ranger Usersync 证书并应用组件

本文介绍了Ambari 3.0.0与Free IPA统一认证体系集成时出现的用户同步问题。当Ranger Usersync服务启动后,Ranger Admin侧未出现FreeIPA的用户数据。通过分析日志发现,问题源于SSL证书配置错误,导致LDAP连接失败(错误提示"Unable to obtain keystore")。日志显示系统尝试从指定路径获取信任库文件失败,最终抛出

文章图片
#ambari#hadoop#大数据
【FreeIPA】 Ambari使用 FreeIPA 做企业认证授权——FreeIPA Client 导致 Ambari 权限异常问题排查

本文分析了在安装FreeIPA客户端后,Ambari组件安装阶段出现权限异常的根本原因及解决方案。主要发现默认UMASK值077导致文件权限过严(目录700/文件600),影响多用户协作访问。通过修改/etc/login.defs中的UMASK为022,并重启相关服务(sshd、ambari-server/agent)即可修复。文章详细说明了问题现象、根因排查方法和标准修复步骤,强调必须创建新会话

文章图片
#ambari#hadoop#大数据
【Hue】Ambari开启 Kerberos 后,Hue 使用 Spark SQL出现凭证不统一问题处理

摘要:Hue在启用Kerberos后访问Spark SQL时出现"GSS initiate failed"错误。日志显示Hue尝试以Hive principal身份连接Spark Thrift Server(dev3:10016),导致认证失败。尝试通过配置[spark]段的sql_server_principal和kerberos_principal_short_name参数

文章图片
#ambari#spark#sql +1
    共 13 条
  • 1
  • 2
  • 请选择