1.docker拉去superset镜像docker pullamancevice/superset2.启动容器1.启动容器docker run -d -p 8188:8088 --name superset -v /opt/docker/superset:/home/superset amancevice/superset映射容器的8088端口到服务器8188映射容器的...

我们大家都知道，kafka消费者在会保存其消费的进度，也就是offset，存储的位置根据选用的kafka api不同而不同。首先来说说消费者如果是根据javaapi来消费，也就是【kafka.javaapi.consumer.ConsumerConnector】，我们会配置参数【zookeeper.connect】来消费。这种情况下，消费者的offset会更新到zookeeper的【con

一、背景与架构1.前言1.1背景    自从hadoop2版本开始，社区引入了NameNode高可用方案。NameNode主从节点间需要同步操作日志来达到主从节点元数据一致。最初业界均通过NFS来实现日志同步，大家之所以选择NFS，一方面因为可以很方便地实现数据共享，另外一方面因为NFS已经发展20多年，已经相对稳定成熟。虽然如此，NFS也有缺点不能满足HDFS的在线存储业务：网络单点及其存储节点

最近再调研任务调度系统，感觉xxl-job和dolphinscheduler都是很棒的开源框架。这里简单的对二者做了一些对比，方便后续的选型个人感觉如果只是想找个简洁好用的日常的任务调度系统，并且不涉及大数据无疑选择xxl-job是更优的选择。如果直接应用于大数据相关任务调度，从功能点的丰富性和相关性感觉更适合选择dolphinscheduler...