logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

14-Spark的安装与配置(Spark Standalone)

难点:Spark配置文件参数的正确设置与集群节点间的服务协同,Spark与Hadoop的集成配置。了解Spark的运行模式(Local、Standalone、YARN、Mesos)及适用场景。能够完成Spark的安装、环境变量配置和Standalone集群部署。能够通过Spark Shell和Web界面验证Spark集群运行状态。培养耐心和细致的调试精神,能够在复杂的系统环境中保持清晰的逻辑思维。

文章图片
#spark#大数据#分布式 +1
15-Flink的安装与配置(Flink Standalone独立集群模式)

最终效果:能够正常访问Flink Web界面(http://master:8081),查看集群状态并成功提交示例作业。了解Flink的四种部署模式(Local、Standalone、YARN、Kubernetes)及其适用场景。说明:每行一个TaskManager节点的主机名或IP,脚本会根据此文件远程启动TaskManager进程。任务槽(Task Slot):Flink资源调度的基本单位,一个

文章图片
#flink#大数据#hadoop +1
8-Mysql的安装与配置

本模块主要讲解大数据平台中数据存储相关的知识,其中重点介绍在Linux环境下(CentOS)安装与配置MySQL数据库的完整流程。通过本任务,学员将掌握MySQL的安装、配置、启动、密码修改及远程登录设置等核心技能。最终效果: 成功启动MySQL服务后,可以使用mysql -u root -p命令登录到MySQL的命令行界面(mysql>)。修改密码: 使用mysqladmin命令修改root用户

#mysql#adb#数据库
到底了