logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

spark submit 指定资源池-CDH Hadoop集群运维记录

spark-submit --master yarn --class com.bcht.application.FlowCountMinStreamingWenShan \--jars $SPARK_HOME/mysql-connector-java-8.0.20.jar --driver-memory 512M --driver-cores 1 --executor-memory 512M --

#cloudera#hadoop#spark
通俗易懂解释java反射机制(一)

Java的反射机制是Java特性之一,反射机制是构建框架技术的基础所在。灵活掌握Java反射机制,对大家以后学习框架技术有很大的帮助。  那么什么是Java的反射呢?       大家都知道,要让Java程序能够运行,那么就得让Java类要被Java虚拟机加载。Java类如果不被Java虚拟机加载,是不能正常运行的。现在我们运行的所有的程序都是在编译期的时候就已经知道了你所需要的那

#虚拟机
linux常用(一)linux 安装配置 jdk之 找不到安装文件目录及source /etc/profile 报unexpected end of file 错误 解决

linux安装配置 jdk ,安装后找不到安装后的文件目录 以及source /etc/profile报 syntax error: unexpected end of file错误 问题 的解决

#linux
元数据管理系统解决方案及产品调研-数仓系列(一)

元数据管理系统产品选型分析 1  概述 需要给目前数据仓库适用一套元数据管理系统,目的 减少人为的维护工作量、web页面协同工作(多人统一入口使用)、元数据权限管理等  1.1  应用背景 目前数据仓库没有专业的元数据管理系统,部分业务模型使用excel文档维护,分散、协同性不好。没有权限管理 1.2  业务目的 减少人为的维护工作量、web页面协同工作(多人统一入口适用),为数据仓库长远高质量发

到底了