虚拟机-重启/挂起后导致k8s环境BUG，启动端口访问不通

启动/恢复后会发现flannel网卡 不为UP 状态

解决方案：协助flannel重新安装

 1.主节点上执行：（这里需要修改自己的 flannel的yaml文件位置）
     kubectl  delete -f kube-flannel.yml
         
      执行过程可能为导致删除阻塞（如果没有跳过）：并且重新执行安装命令会报错：
      error when creating "kube-flannel.yml": serviceaccounts "flannel" is forbidden: unable to create new content in namespace kube-flannel because it is being terminated
      意思是说：namespace 为 kube-flannel 的命名空间状态为：Terminating 无法创建flannel

    解决方案：
        第一步： kubectl get ns kube-flannel -o json > delete-ns.json
        第二步：vim delete-ns.json 删除下图圈中内容：

        第三步: kubectl proxy --address='0.0.0.0' --port=8081
        第四步：curl -k -H "Content-Type: application/json" -X PUT --data-binary @delete-ns.json http://127.0.0.1:8081/api/v1/namespaces/kube-flannel/finalize

2.接着在所有节点上执行：

	ifconfig cni0 down
    ip link delete cni0
    ifconfig flannel.1 down
    ip link delete flannel.1
    rm -rf /var/lib/cni/flannel/*
    rm -rf /var/lib/cni/networks/cbr0/*
    rm -rf /var/lib/cni/cache/*
    rm -f /etc/cni/net.d/*
    systemctl restart kubelet
    systemctl restart docker
    chmod a+w /var/run/docker.sock

3.在主节点上再次创建flannel

kubectl apply -f /home/kube-flannel.yml

4.如果端口还是访问不了，此时查看k8s的dns 服务是否正常，或者启动从节点报错：19012 kubelet.go:2267] node “xxxnode” not found

解决方案：
	主节点上执行：
   	 	systemctl stop kubelet
    	systemctl stop docker
    	iptables --flush
    	iptables -tnat --flush
    	systemctl start kubelet
    	systemctl start docker

访问成功：