背景介绍最近又能挤一挤时间，来聊一聊前一段时间接手的一个大数据系统项目。随着云计算的普及，大部分互联网公司的系统都是基于云原生的产品和体系来搭建的，我接手的系统也不例外。数据处理部分从底层存储，到中间层数据处理系统，再到上层的ETL系统第一版都是基于Google Cloud Platform来搭建的，GKE + PubSub + DataFlow + FireStore，数据服务部分，负载均衡..

之前围绕阿里云的容器服务，内部做了一次阿里云基于k8s服务治理的总结。这次系统地学习了docker与k8s的网络模型，并从kubelet出发研究了kubelet -> dockershim -> cni -> flannel的调用链路，对cni项目的源码做了些许分析。Docker网络模型K8S网络模型同POD网络同NODE网络不同NODE网络CNI分析D...

前言互联网公司在起步阶段一般用户量少，系统处在快速试错与迭代阶段，对于系统部署对用户的影响及系统上线的流程不会有太多的顾虑和投入。相反，当业务量上升，系统承载的流量也因此升高，这时还用起步阶段的部署流程和方式，不仅对用户使用可能带来较大的影响，也对自身产品的品牌形象带来伤害。这个话题其实已是老生常谈，现在各种微服务治理，k8s等容器编排系统甚至service mesh的普及，将服务上线对现网的..

背景说明项目基本完成容器化与vpc迁移，完成架构改造的第一步。之后计划将服务逐步迁移到k8s上管理，依赖docker+k8s这样的PAAS平台，做到“更轻量的运维，人人都是devops”。首先项目运行在阿里云的vpc内，需要使用阿里云的k8s容器服务，需要做所有系统的二次迁移。那么在迁移之前，需要了解使用k8s的架构需要有哪些一些基础设施。k8s作为优秀的PAAS平台，已经帮我们解决资源调度...