logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

Hadoop集群添加节点

1、添加新的虚拟主机a)修改主机名vi /etc/sysconfig/networkb)永久关闭防火墙/etc/init.d/iptables stopchkconfig iptables offc)关闭selinuxvi /etc/selinux/configSELINUX=disabledd)修改所有节点的 /etc/hosts文件。添加新节点的ip和主机名e)主节点到新节点的ssh无密码登录

#hadoop
Linux 服务器添加硬盘并进行分区,实现自动挂载

1、添加硬盘:在虚拟机中添加硬盘鼠标右击,点击设置点击添加选择硬件,点击下一步添加后重启服务器,发现新硬盘2、硬盘分区:fdisk /dev/sdbnp分区一的开始1分区一的结尾自定义1分区二的开始自定义1+1分区二的结尾自定义2w3、磁盘格式化mkfs -t ext4/dev/sdc1mkfs -t ext4/dev/sdc24、硬盘挂载(临时挂载:重启linux系统后,不会挂载)moun

#linux
Zookeeper集群搭建

前期准备:安装jdk(主页搜 jdk 有教程)同步集群时间(主页搜 时钟同步 有教程)关闭防火墙主机与ip映射配置下载安装包、解压例如:tar -zxvf zookeeper-3.4.5.tar.gz -C /export/servers修改环境变量(注意:3台zookeeper都需要修改)进入vi /etc/profile.d/zookeeper.sh添加export ZOOKEEPER_HOM

#zookeeper
Zookeeper的API操作

public static void main(String[] args) throws Exception {//创建zk对象ZooKeeper zk = new ZooKeeper("node01:2181,node02:2181,node03:2181", 10000, new Watcher() {@Overridepublic void process(WatchedEvent wat

#zookeeper#java
ZooKeeper shell(增删改查)

客户端连接:zkCli.sh -server ip地址创建节点创建永久节点(和会话没有关系,可以有子节点):create /test01 111创建临时节点(会话结束,节点消失,不能有子节点):create -e /test01 111创建顺序节点(在给定的文件名后追加序列号(序列号依次递增)):create -s /test01 111读取节点查看子节点:ls /test01查看子节点和本节点详

#zookeeper
Zookeeper基本知识

ZooKeeper概述:Zookeeper是一个分布式协调服务的开源框架。

#zookeeper
kafka集群的启动与关闭命令及脚本封装

目标:step1:如何启动Kafka集群?step2:如何关闭Kafka集群?step3:如何封装启动及关闭脚本?实施:启动Zookeeper/export/server/zookeeper-3.4.6/bin/start-zk-all.sh启动Kafkabin/kafka-server-start.sh config/server.properties >>/dev/null 2&g

#kafka#zookeeper#linux
Kafka分布式集群部署

目标:实现Kafka分布式集群的搭建部署路径:step1:选择版本step2:下载解压安装step:3:修改配置文件实施:step1:版本的选型0.8.x:老的版本,很多的问题0.10.x +:消息功能上基本没有问题选择:kafka_2.12-2.4.1.tgzKafka:2.4.1Scala:2.12,Kafka是由Scala语言开发step2:下载解压安装下载地址:http://archive

#kafka#分布式
Linux-Mysql安装部署及解决中文乱码、解决mysql远程连接失败

1、安装部署a)安装:yum install -y mysql-serverb)启动mysql:/etc/init.d/mysqld startc)设置用户名密码:/usr/bin/mysqladmin -u root password '123456'd)使用root登录:mysql-uroot-p123456Mysql命令查看数据库列表showdatabases;查看数据表showtables

#linux
传统数据与大数据对比

传统Linux系统与大数据linux系统安装的区别传统Linux系统系统硬盘(与数据硬盘100%隔离):两块硬盘做一个RAID1引导分区200M交换分区内存的两倍根分区/(所有的空间)数据硬盘:多个硬盘制作一个逻辑卷,即将多个物理硬盘制作成一个大的逻辑硬盘大数据linux系统系统硬盘:两块硬盘做一个RAID1引导分区200M交换分区可以设置很小也可以不设置(因为在大数据中需要将其关闭)数据硬盘.

#大数据
    共 11 条
  • 1
  • 2
  • 请选择