logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

初识 storm 分布式流计算

在2011年Storm开源之前,由于Hadoop的火红,整个业界都在喋喋不休地谈论大数据。Hadoop的高吞吐,海量数据处理的能力使得人们可以方便地地处理海量数据。但是,Hadoop的缺点也和它的优点同样鲜明——延迟大,响应缓慢,运维复杂。有需求也就有创造,在Hadoop基本奠定了大数据霸主地位的时候很多的开源项目都是以弥补Hadoop的实时性为目标而被创造出来。而在这个节骨眼上Storm横空

#storm
elasticsearch系列四:集群常规运维

在使用es中如果遇到了集群不可写入或者部分索引状态unassigned,明明写入了很多数据但是查不到等等系列问题该怎么办呢?咱们今天一起看下常用运维命令。我们想要更好的使用es不能只注意查询语法的书写,需要全访问的深入的了解es,建议从头到尾过一遍官方文档,毕竟只有目前最了解孩子。Elasticsearch系列经典文章elasticsearch列一:索引模板的使用elasticsearch系列二:

文章图片
#elasticsearch#运维#大数据
elasticsearch系列九:异地容灾-CCR跨集群复制

起初只在部分业务中采用es存储数据,在主中心搭建了个集群,随着es在我们系统中的地位越来越重要,数据也越来越多,针对它的安全性问题也越发重要,那如何对es做异地容灾呢?今天咱们就一起看下官方提供的解决方案cross-cluster replication(简称ccr)。

文章图片
#elasticsearch#大数据#搜索引擎
elasticsearch系列四:集群常规运维

在使用es中如果遇到了集群不可写入或者部分索引状态unassigned,明明写入了很多数据但是查不到等等系列问题该怎么办呢?咱们今天一起看下常用运维命令。我们想要更好的使用es不能只注意查询语法的书写,需要全访问的深入的了解es,建议从头到尾过一遍官方文档,毕竟只有目前最了解孩子。Elasticsearch系列经典文章elasticsearch列一:索引模板的使用elasticsearch系列二:

文章图片
#elasticsearch#运维#大数据
详解Dockerfile,并构建docker私有库,通过maven自动构建镜像和部署,达到持续集成

上篇给大家简单的介绍了一下docker的架构,已经常用命令.http://blog.csdn.net/qq_38665235/article/details/79182931今天带大家通过Dockerfile构建docker镜像,并构建docker私有仓库,通过maven进行打包自动构建镜像自动部署,达到持续集成目的废话不多说,首先介绍下Dockerfile中常用的命令FROM

zk集群搭建以及java客户端连接zk

项目终于不忙了.闲来无事,想起上次面试被人问了一个zk把我给问住了.看来要好好了解一下zk了.于是开始了zk的学习之路.首先带大家搭建一下zk集群环境,这个很简单,我就不说那么详细了,首先准备三台机器,来安装zk集群  要有root权限,因为要改hosts下载zk安装包上传到liunx服务器  我用的zookeeper.3.4.10.tar.gz   你们用其他

基于canal client 自实现canal同步es(增量,全量)

canal是阿里开源的一款纯java语言的mysql增量订阅工具,主要是伪装成slave节点,向mysql发送dump协议官方原理图如下:官方的解释:server代表一个canal运行实例,对应于一个jvm...

到底了