logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

Hadoop伪分布式环境搭建全攻略

本文详细介绍了在Ubuntu系统上搭建Hadoop伪分布式环境的完整流程。主要内容包括:1)更新apt并安装必要工具;2)配置SSH免密登录;3)安装配置Java环境;4)下载解压Hadoop并配置环境变量;5)修改core-site.xml和hdfs-site.xml配置文件;6)初始化HDFS并启动集群;7)运行WordCount示例验证集群;8)配置Hadoop全局环境变量。整个过程涵盖了从

#大数据#hadoop
Hadoop 3.3.5 分布式集群部署

本文详细记录了Hadoop 3.3.5集群的安装配置过程。主要内容包括:环境准备(3节点、JDK8+、SSH免密登录)、软件安装(统一/opt/module路径)、核心配置文件修改(core-site.xml等5个文件)、集群分发与同步。重点解决了两个关键问题:1)SSH免密登录配置不全导致的主节点无法自连接问题;2)SSH用户名不一致问题。最后通过清理残留数据、重新格式化和启动集群,成功实现了H

文章图片
#hadoop#大数据#分布式
到底了