logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

jenkins服务器拉取不了github依赖

jenkins服务器拉取不了github依赖

#github
HDFS学习笔记

对于每一个数据块,NameNode 节点返回保存数据块的数据节点的地址。当Active NameNode的命名空间发生变化的时候,它会把这个变化通知所有JN,有的JN收到信息,有的JN是没有收到信息的,如果大部分JN进程接到信息,就认为这个事件是可信的,如果少数的JN接到信息,就认为这个信息是错误的,是屏蔽的,对于可信的信息,standby Namenode才会去同步过来,通过JN这种方式,才能保

文章图片
#hdfs#hadoop#学习
Kafka学习笔记

(16)副本数据写成功:message真正存储还是要存储到磁盘上的,数据写入到leader后,从节点以异步的方式主动到leader拉取数据,数据到达从服务器后并不是立马写磁盘的,立即往磁盘写的话会消耗很多时间,时效性不高,而是先存储在内存中,写完内存后就返回ack给leader,说明副本数据写成功,之后再自己内部落地数据到磁盘,这样既高效也保证了数据可靠性。(15)kafka动态的维护了一组in-

文章图片
#kafka#学习
Ipython、Jupyter、Anaconda安装

Anaconda是一个开源的python包环境管理器,可以用于在同一个机器上安装不同版本的软件包及其依赖,并能够在不同的环境之间切换。其包含了conda、numpy、pandas等180多个科学包及其依赖项。安装Anaconda3yum install -y bzip2 wgetuseradd pythonsu - pythonwget https://mirrors.tuna.t...

#jupyter
到底了