Flannel容器集群网络部署

Overlay Network：覆盖网络，在基础网络上叠加的一种虚拟网络技术模式，该网络中的主机通过虚拟链路连接起来。
VXLAN：将源数据包封装到UDP中，并使用基础网络的IP/MAC作为外层报文头进行封装，然后在以太网上传输，到达目的地后由隧道端点解封装并将数据发送给目标地址。
Flannel：是Overlay网络的一种，也是将源数据包封装在另一种网络包里面进行路由转发和通信，目前已经支持UDP、VXLAN、AWS VPC和GCE路由等数据转发方式。

flannel工作原理：

Falnnel要用etcd存储自身一个子网信息，所以要保证能成功连接Etcd，写入预定义子网段：(路径和url填自己的内网ip以及密钥地址)

etcdctl --endpoints=https://10.61.66.230:2379 \
  --ca-file=/opt/kubernetes/ssl/ca.pem \
  --cert-file=/opt/kubernetes/ssl/etcd.pem \
  --key-file=/opt/kubernetes/ssl/etcd-key.pem \
  set /coreos.com/network/config '{ "Network": "172.17.0.0/16", "Backend": {"Type": "vxlan", "DirectRouting": true}}'

准备二进制包

wget https://github.com/coreos/flannel/releases/download/v0.10.0/flannel-v0.10.0-linux-amd64.tar.gz
tar xf flannel-v0.10.0-linux-amd64.tar.gz
cp flanneld mk-docker-opts.sh /opt/kubernetes/bin/

flannel配置文件

vi /opt/kubernetes/cfg/flanneld.conf

ETCD_ENDPOINTS="https://10.61.66.230:2379"
ETCD_PREFIX="/coreos.com/network"
IFACE="eth0"
ETCD_CAFILE="/opt/kubernetes/ssl/ca.pem"
ETCD_CERTFILE="/opt/kubernetes/ssl/etcd.pem"
ETCD_KEYFILE="/opt/kubernetes/ssl/etcd-key.pem"

配置flannel系统服务

vi /usr/lib/systemd/system/flanneld.service

[Unit]
Description=Flanneld
Documentation=https://github.com/coreos/flannel
After=network.target
Before=docker.service

[Service]
User=root
ExecStartPost=/opt/kubernetes/bin/mk-docker-opts.sh
EnvironmentFile=-/opt/kubernetes/cfg/flanneld.conf
ExecStart=/opt/kubernetes/bin/flanneld \
--ip-masq=true \
--iface=${IFACE} \
--etcd-prefix=${ETCD_PREFIX} \
--etcd-endpoints=${ETCD_ENDPOINTS} \
--etcd-cafile=${ETCD_CAFILE} \
--etcd-certfile=${ETCD_CERTFILE} \
--etcd-keyfile=${ETCD_KEYFILE}
Restart=on-failure
Type=notify
LimitNOFILE=65536

[Install]
WantedBy=multi-user.target

启动flannel

systemctl daemon-reload
systemctl enable flanneld
systemctl restart flanneld
systemctl status flanneld

配置docker使用flannel网络

vi /usr/lib/systemd/system/docker.service

#修改这一段
EnvironmentFile=/run/flannel/subnet.env
ExecStart=/usr/bin/dockerd \
  -H fd:// \
  --bip=${FLANNEL_SUBNET} \
  --ip-masq=${FLANNEL_IPMASQ} \
  --mtu=${FLANNEL_MTU} \
  --containerd=/run/containerd/containerd.sock

重新加载

systemctl daemon-reload
systemctl restart flanneld
systemctl restart docker

查看网络信息，确保docker0 和flannel同网段