logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

尚硅谷电商数仓6.0导论

用于整理记录学学习内容与遇到的问题

#hbase#hadoop#hive +3
Linux系统内docker部署的nginx,转发ruoyi前端时500报错,系统接口404异常解决

文章的最后一句去试了一下,把我打包好的前端文件复制了一份到nginx/html文件里,这是改正后的location部分代码(正确版)(本人就是忘记开端口了)然后再把nginx.conf文件里的location改成我前面说的正确版就不会报500的错误了!现在访问不会报500了,但是...出现了系统接口404异常?然后去修改对应的nginx.conf文件,location部分内容是这样的(错误示范)然

#docker#容器#运维
hive on spark hql 插入数据报错 Failed to create Spark client for Spark session

本文记录了Hive on Spark模式下SQL插入数据失败问题的排查过程。遇到Failed to create Spark client;错误后,作者先后尝试了修改YARN配置、切换MR引擎、调整调度算法、修复主机名解析等措施。最终发现问题的根源在于环境变量未被Hive继承,通过在Hive启动脚本中添加Hadoop和YARN配置路径解决。整个过程涉及多个组件配置调整,展示了分布式环境问题排查的复

#hive#spark#hadoop
数据采集环境搭建

本文详细记录了Hadoop集群环境搭建的全过程,包括以下核心内容: 基础环境配置 主机名修改与SSH免密登录配置 自定义分发脚本xsync实现多节点文件同步 JDK环境安装与配置 核心组件部署 Hadoop集群搭建与配置(HDFS/YARN) Zookeeper集群安装与问题排查(含JAVA_HOME设置问题解决方案) Kafka集群部署与启动脚本开发 日志采集系统 模拟日志生成工具配置 Flum

文章图片
#数据仓库
hive on spark hql 插入数据报错 Failed to create Spark client for Spark session

本文记录了Hive on Spark模式下SQL插入数据失败问题的排查过程。遇到Failed to create Spark client;错误后,作者先后尝试了修改YARN配置、切换MR引擎、调整调度算法、修复主机名解析等措施。最终发现问题的根源在于环境变量未被Hive继承,通过在Hive启动脚本中添加Hadoop和YARN配置路径解决。整个过程涉及多个组件配置调整,展示了分布式环境问题排查的复

#hive#spark#hadoop
到底了