logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

hbase基于快照的数据迁移

hbase基于快照的数据迁移前期准备1.        对于开启安全认证(kerberos)的集群,首先需要关掉安全认证。2.        在源集群所有节点/etc/hosts文件中配置目标集群所有节点的host。源集群操作开启HBase快照1.   登录Ambari检查hbase-site.xml中的hbase.snapshot.enabled是否设置为true,确认打

#hbase#迁移
HUE配置Notebook提交spark

为执行Spark Job,Hue提供了执行服务器Livy,加强了Huenotebook对spark的支持。它类似于Ooziehadoop工作流服务器,对外提供了Rest Api,客户端将sparkjar以及配置参数传递给livy,livy依据配置文件以及参数执行jar。hue配置文件*.ini中配置如下:1.测试scalahue登录

#spark#scala#数据分析
到底了