logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

zookeeper

2.没有刷新环境变量记得刷新环境变量source /etc/profile。4.看日志日志在/opt/installs/hadopp3.1.4/logs。1、坏了的解释器文件是window。

#linux#运维#服务器
Hive SQL 踩坑实录

replaceall和replace 都是替换所有replaceall 能用正则表达式。志查阅报错信息和日志sql异常。

#hive#sql#hadoop
Flume 四大经典数据流场景实战:从 Avro 通信到 HDFS 数仓采集全解

本文深入解析了 Flume 四大经典数据流场景的实战配置与核心原理,覆盖了从跨节点通信到不同文件采集场景的全流程。调试场景优先选择;单文件实时日志采集推荐;批量文件采集优先使用;多文件并行实时采集首选。

#flume#hdfs#大数据
DataX从入门到实战:保姆级教程,搞定异构数据源离线同步

DataX是阿里巴巴开源的离线数据同步工具,支持多种异构数据源之间的高效同步。本文从基础认知、安装部署、实战案例到性能调优,全面介绍了DataX的使用方法。核心内容包括:DataX采用"Framework+Plugin"架构,通过Reader和Writer插件实现不同数据源间的数据传输;支持MySQL、Hive、HDFS、MongoDB等主流数据源;提供详细的安装指南和常见报错

#大数据
DataX从入门到实战:保姆级教程,搞定异构数据源离线同步

DataX是阿里巴巴开源的离线数据同步工具,支持多种异构数据源之间的高效同步。本文从基础认知、安装部署、实战案例到性能调优,全面介绍了DataX的使用方法。核心内容包括:DataX采用"Framework+Plugin"架构,通过Reader和Writer插件实现不同数据源间的数据传输;支持MySQL、Hive、HDFS、MongoDB等主流数据源;提供详细的安装指南和常见报错

#大数据
到底了