logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

hadoop2.x新特性HDFS HA、YARN HA,分布式搭建

前期准备就不详细说了,课堂上都介绍了一、.修改Linux主机名:所有主机上的主机名必须一致sudo gedit/etc/hostname2.修改IP:刚建好的虚拟机的ip是动态的每次重启可能发生该变,这样的话每次重启可能都有需要修改hosts文件,所以这里我们推荐配置静态IP,配置方法如下:1).2).3).4).5).选中IPv4

#hadoop#分布式#yarn
JVM如何加载一个类的过程

虚拟机把描述类的数据从Class文件加载到内存,并对数据进行校验、转换解析、初始化,最终形成可以被虚拟机直接使用的Java类型,这就是虚拟机的类加载机制从类被加载到虚拟机内存中开始,到卸载出内存为止,类的生命周期包括七个阶段:加载(Loading);验证(Verification);准备 (Preparation);解析(Resolution);初始化(Initializa

#jvm#java
zookeeper的集群安装

1.上传zk安装包(点击这里下载)2.解压3.配置(先在一台节点上配置)3.1添加一个zoo.cfg配置文件$ZOOKEEPER/confmv zoo_sample.cfg zoo.cfg3.2修改配置文件(zoo.cfg)dataDir=/sfd/zookeeper-3.4.5/dataserver.1=hadoop-master:2888:3

#zookeeper#集群#hadoop
Ubuntu hadoop 伪分布式环境搭建步骤+ssh密钥(免密码登录)配置

1.关闭防火墙查看防火墙状态service iptables status关闭防火墙service iptables stop查看防火墙开机启动状态chkconfig iptables --list关闭防火墙开机启动chkconfig iptables off重启Linuxreboot2.安装JDK2.1上传alt+p

想比较传统消息系统,kafka可以很好的保证有序性~

传统的队列在服务器上保存有序的消息,如果多个consumers同时从这个服务器消费消息,服务器就会以消息存储的顺序向consumer分发消息。虽然服务器按顺序发布消息,但是消息是被异步的分发到各consumer上,所以当消息到达时可能已经失去了原来的顺序,这意味着并发消费将导致顺序错乱。为了避免故障,这样的消息系统通常使用“专用consumer”的概念,其实就是只允许一个消费者消费消息,当然这就意

#kafka
到底了