logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

spark-操作hbase 2种方式

一.spark操作hbase的方式方式1.通过hive外部表映射成hbase表,然后通过spark-sql可以查询hbase表。方式2.通过创建HadoopRdd也可以查询hbase表。二.方式区别方式1.通过spark操作hive的hbase映射表 会产生全表扫描,无法通过rowkey来过滤数据。方式2.通过创建HadoopRdd的方式可以设置Startrow 和 endRow来设置数据的范围,

#spark
DolphinScheduler任务调度源码剖析

DolphinScheduler任务调度源码剖析

#zookeeper#spark#hive +1
yarn 杀死 application 命令

1.杀死 applicationyarn application -kill + application id2. 杀死jobhadoop job -kill + jobID

暂无文章信息