logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

安装CentOS6.8并配置网络图文解说亲测全过程

安装环境:本文是在win10系统安装上VMWare并配置Centos6.8虚拟机。准备工作1.安装VMWare虚拟机1.1下载VMWare12资源链接:https://pan.baidu.com/s/1AhfMSDXLO-aA0eMqnuMWHg 提取码:iftd1.2安装VMWare,在安装过程中需要输入密钥,填写下面密钥即可,傻瓜式安装。5A02H-AU243-TZJ49-GTC7...

最详细Flink安装以及案例之WordCount

前言:本文主要介绍如何将Flink以本地模式运行在单机上。运行环境Linux-CentOS6.8JDK-1.8hadoop-2.7.5flink-1.7.1-bin-hadoop27-scala_2.11flink安装配置过程1.下载1.1进入下载页面。如果你想让Flink与Hadoop进行交互(如HDFS或者HBase),请选择一个与你的Hadoop版本相匹配的Flink包。...

#flink#linux#hadoop
Spark2.3 - 运行异常NoSuchMethodError:io.netty.buffer.PooledByteBufAllocator.metric()

一、问题说明在一个项目中同时引入了多个框架hbase 1.4.1kafka 1.1.0spark 2.3.0在以local模型运行spark示例程序的时候,出现如下报错:Exception in thread "main" java.lang.NoSuchMethodError: io.netty.buffer.PooledByteBufAllocator.me

#spark
zookeeper完全分布式安装

ZooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,是Google的Chubby一个开源的实现,是Hadoop和Hbase的重要组件。它是一个为分布式应用提供一致性服务的软件,提供的功能包括:配置维护、域名服务、分布式同步、组服务等。

#zookeeper
dbeaver配置驱动手册

一、配置hive连接(impala同理)点击数据库,新建连接选择hadoop/bigdata,选择apache hive点击下一步,输入以下选项点击编辑驱动设置,找到驱动文件目录,添加文件夹,点击找到类,选择hivedriver选择确定,点击测试连接按钮即可

文章图片
#hadoop#hive#大数据
Python三部曲

简介:anaconda3下载地址官网:https://www.anaconda.com/download/百度云链接:https://pan.baidu.com/s/17jHeU909P1pmITCkZg3tcQ 密码:javtpython基础语法文档官网:https://docs.python.org/3.6/tutorial/index.html为什么要使用python一、pyt...

#python
Phoenix安装与使用文档超详细步骤

一、描述          现有hbase的查询工具有很多如:Hive,Tez,Impala,Shark/Spark,Phoenix等。今天主要记录Phoenix。          phoenix,中文译为“凤凰”,很美的名字。Phoenix是由saleforce.com开源的一个项目,后又捐给了Apache基金会。它相当于一个Java中间件,提供jdbc连接,操作hbase数据表。...

#hbase#java#centos
ERROR 1045 (28000): Access denied for user 'root'@'localhost' (using password: YES)

问题描述:1.mysql命令直接能进去mysql2.mysql -uroot -p输入密码,报下面显示的错误.解决方案:1.首先关闭mysqlservice mysqld stop查看mysql状态service mysqld status2.设置使用命令跳过输入密码过程mysqld_safe --user=mysql --s...

#hadoop#mysql
离线计算调优手册

目前离线计算主要分为两块: 和 ,该手册将围绕这两部分展开说明。随着技术不断迭代升级,结合不同业务、不同场景,手册的适用性可能发生变化,因此下面介绍的优化手段可作为参考,并不是一成不变的。Hive的简单定义(来自Hive官网):简单来说,hive本身是一种数据仓库,通过其提供的sql和访问接口,使我们能够很方便的访问读写大规模数据集,无需关注底层数据是如何分布存储的。目前hive 提供了三种计算引

文章图片
#hive#hadoop#大数据 +1
到底了