写在前面：博主本人用的是13年的pc廉价pc机，硬件有限，所以用4台虚拟机，一主三从的形式搭建了一个hadoop集群，并没有搭建高可用的集群，下面为整体步骤：1、修改主机名  /etc/sysconfig/network2、修改hosts文件 /etc/hosts3、安装jdk4、安装hadoop5、修改配置文件6、克隆虚拟机7、修改各个机器上的host

创建文件：vim shell01.shecho "=====截取字符串的八种方式======"string="http://localhost:8080/myprogram/index.html"echo ${string}echo '#*//从左边开始， 删除//左边的值，保留右边的值  '${string#*//}echo '#//*无法截取，#只能从左

客户端访问数据的流程：HBase Client -> Zookeeper -> -ROOT- -> .META. ->用户数据表其中会有多次网络操作，不过client端有cache缓存。ØZookeeperZookeeper中记录了-ROOT-表的location。Ø-ROOT-表包含.META.表所在的region列表，该表只会有一个Region；Ø.META.

package com.asiainfo.spark.streamingimport org.apache.spark.{HashPartitioner, SparkConf}import org.apache.spark.storage.StorageLevelimport org.apache.spark.streaming.kafka.KafkaUtilsimport org...

kafka常用命令汇总，工作总结

sparkstreaming消费kafka数据

kafka常用命令

来自《kafka高性能解析》的整理，很好，很全面

Spring 是一个开源框架.Spring 为简化企业级应用开发而生. 使用 Spring 可以使简单的 JavaBean 实现以前只有 EJB 才能实现的功能.Spring 是一个 IOC(DI) 和 AOP 容器框架.具体描述 Spring:轻量级：Spring 是非侵入性的 - 基于 Spring 开发的应用中的对象可以不依赖于 Spring 的 API依赖注入(DI