logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

大数据中遇到的问题简述(待续)

大数据中遇到的问题简述(待续)1、数据量大怎么分析?分析后怎么做传输?怎么做到实时?数据量大可在hadoop平台分析。分析的结果数据可用sqoop迁移数据工具导出。常用实时处理框架有sparkStreaming、storm、flink等。2、数据来源?python爬虫爬取网页。单机多线程、分布式多线程。定期导入到离线系统。3、如何分析数据?数据量小,一个复杂的sql即可搞定,web服务...

#大数据
Java常用方法汇总(持续更新)

Java常用应用20230725更新1 常用方法List常用方法List<Map<String, String>>根据某个key排序List<BusinessProjectVO> records = Optional.ofNullable(businessProjectPage).orElse(new Page<>()).getRecords().s

文章图片
#java#windows#开发语言
Oozie之Web Console Is Disabled问题解决方法

Oozie之Web Console Is Disabled问题解决方法1、启动Oozie,登录Oozie Web Console1.1 Oozie Web UI入口1.2 登录后出现如下图提示2、进入XShell连接虚拟机安装库2.1 进入虚拟机中下载一个库(也可手动下载)wget http://public-repo-1.hortonworks.com/HDP-UTILS-GPL...

#ambari#大数据
到底了