参考《和我一步步部署 KUBERNETES 集群》，将其部署步骤通过ansible playbook实现自动化部署。https://www.gitbook.com/book/opsnull/follow-me-install-kubernetes-cluster/details环境要求实验环境通过MBP下的virtualbox和vagrant来提供3台虚拟机(centos 7)进行部署，其

一、flink架构1.flink是一个主从结构的分布式程序，它由client和cluster两部分组成。2.cluster由主节点JobManager（JM）和从节点TaskManager组成(TM)。a.JM负责协调分布式执行：调度Task、协调检查点、协调失效恢复等工作。JM至少要有一个，也可有多个。多个JM可基于zookeeper做HA,一个active，其余stand

marathon部署一套最简单的前端程序1.要求：成功部署一个index.html到Nginx.2.实现：1.建立一个最简单的web工程 first-portal，目录结构如下：说明：index.html是主要的入口文件。images中存储的是index.html中使用的图片（用于测试）Dockerfile是改工程的docker编译文件，用于打包docker镜

一、Java部署的原因我们想通过mesos来管理Java编写的微服务，因此我们需要安装Java。同时也为后面mesos管理大数据应用提供runtime。所以Java必须安装。二、Java部署的方法下载目录/cloudstar/software下载jdkwget http://download.oracle.com/otn-pub/java/jdk/8u144-b01/090

一、marathon最简单的hello world应用要求：部署一个打印语句,输出将在stdout的日志中查看.方案：cat test001.json{"id": "hello","cmd": "while [ true ] ; do echo 'Hello Marathon' >> /cloudstar/hello.txt; sleep 1; done","cpus":

marathon部署一个docker register1.要求：成功部署一个docker register暂时还不能实现重启容器数据不丢,如果要保障重启容器数据不丢失，那就要使用volume进行外部存储。2.实现：cat marathon.json{"id": "/bigdata-base-services/registry","cpus": 1,"mem": 256,

本文采用Maxwell来实现实时解析mysql的binlog日志发送至kafka1、开启mysql binlog环境中mysql是docker容器,所以需要进入容器修改mysql配置.docker exec -it ef07dab4da9d bash然后进入/etc/mysql/ 修改my.cnf增加如下内容server-id=1l...

四、flink的生态系统flink和开源大数据处理的各种框架有很好的集成,这样它就能和其他框架密切合作形成大数据的统一的解决方案。flink支持YARN,HDFS,Kafka,hbase,alluxio等其他大数据系统的集成。flink生态系统flink也积极融入到大数据生态圈和现有的大数据处理方案继续良好的融合，以降低大数据开发的难度。spark生态系统flink的生态系统和spark很相似，他