2021最新阿里云部署kubernetes集群（篇2 集群配置）

本实验接着上一次实验：2021最新阿里云部署k8s集群（篇1 购买服务器）_今天不学习，明天变"咸鱼" >_<的博客-CSDN博客架构解析环境准备安装软件获取镜像配置启动kubelet初始化集群配置网络插件配置Node节点加入集群集群检查集群部署Docker版本：Server Version: 20.10.8kubeadm.....版本：v1.22.1Kubeadm也是一个工具，提供k

今天不学习，明天变"咸鱼" >_<

1583人浏览 · 2021-09-28 13:03:46

今天不学习，明天变"咸鱼" >_< · 2021-09-28 13:03:46 发布

本实验接着上一次实验：2021最新阿里云部署k8s集群（篇1 购买服务器）_今天不学习，明天变"咸鱼" >_<的博客-CSDN博客

注意：这篇文章在CentOS7上也能搭建，已经测试过！！！！！！！！！

只有在安装软件上有一小点不同！！！！！！！

架构解析

环境准备
安装软件
获取镜像
配置启动kubelet
初始化集群
配置网络插件
配置Node节点加入集群
集群检查
kubelet补全命名

集群部署

Docker版本：Server Version: 20.10.8

kubeadm.....版本：v1.22.1

Kubeadm也是一个工具，提供kubeadm init和kubeadm join，用于快速部署Kubernetes集群。

官方地址：Kubeadm | Kubernetes

环境：

192.168.9.60	master
192.168.9.61	node1
192.168.9.62	node2

一、环境准备

master/node1/node2

#三台机器同时去修改相应的操作


1. 修改主机名hostname
[root@master ~]# hostnamectl set-hostname master
[root@node1 ~]# hostnamectl set-hostname node1
[root@node2 ~]# hostnamectl set-hostname node2

2. 进行DNS本地域名解析
# vim /etc/hosts
192.168.9.60    master
192.168.9.61    node1
192.168.9.62    node2

3. 关闭selinux防火墙
# sed -i 's/SELINUX=permissive/SELINUX=disabled/' /etc/sysconfig/selinux

4. 关闭firewalld
# systemctl  disable  firewalld

5. 关闭Swap交换分区
# sed -i 's/.*swap.*/#&/' /etc/fstab

6. 检查MAC地址和product_uuid是否有冲突
# ip link
# cat /sys/class/dmi/id/product_uuid

7. 重启系统
# reboot

二、安装软件

master/node1/node2

#三台机器同时去修改相应的操作


1. 安装docker-ce依赖软件：
# yum install wget container-selinux -y

2. 获取container包：
# wget https://download.docker.com/linux/centos/7/x86_64/stable/Packages/containerd.io-1.2.6-3.3.el7.x86_64.rpm

3. rpm安装container包：
# rpm -ivh containerd.io-1.2.6-3.3.el7.x86_64.rpm

注意：上面的步骤在centos7中无须操作

#这个在centos8机器上不管用了
### update-alternatives --set iptables /usr/sbin/iptables-legacy

4. 安装docker-ce的Yum源及一些相关工具：
# yum install -y yum-utils device-mapper-persistent-data lvm2 && yum-config-manager --add-repo https://download.docker.com/linux/centos/docker-ce.repo 

5. 安装docker-ce：
# yum makecache  && yum -y install docker-ce -y 

6. 配置docker-ce开启自启与启动：
# systemctl enable docker.service && systemctl start docker

7. 查看docker-ce是否安装成功：
# docker info

#===============================================================================

8. 配置k8s的Yum源：
# vim /etc/yum.repos.d/kubernetes.repo
[kubernetes]
name=Kubernetes
baseurl=https://mirrors.aliyun.com/kubernetes/yum/repos/kubernetes-el7-x86_64
enabled=1
gpgcheck=1
repo_gpgcheck=1
gpgkey=https://mirrors.aliyun.com/kubernetes/yum/doc/yum-key.gpg https://mirrors.aliyun.com/kubernetes/yum/doc/rpm-package-key.gpg

9. 安装k8s的组件：
# yum -y makecache
# yum install -y kubelet kubeadm kubectl ipvsadm
说明：如果想安装指定版本的kubeadmin
#yum install kubelet-1.16.0-0.x86_64 kubeadm-1.16.0-0.x86_64 kubectl-1.16.0-0.x86_64

10. 配置内核参数： #面试
# vim /etc/sysctl.d/k8s.conf
net.bridge.bridge-nf-call-ip6tables = 1
net.bridge.bridge-nf-call-iptables = 1
vm.swappiness=0

11. 查看参数是否配置成功：
# sysctl --system
# modprobe br_netfilter     #把已经存在的内核模块加载到系统中
# sysctl -p /etc/sysctl.d/k8s.conf

12. 加载ipvs相关内核模块
如果重新开机，需要重新加载（可以写在 /etc/rc.local 中开机自动加载）
# modprobe ip_vs
# modprobe ip_vs_rr
# modprobe ip_vs_wrr
# modprobe ip_vs_sh
# modprobe nf_conntrack_ipv4

13. 查看是否加载成功
# lsmod | grep ip_vs

三、获取镜像

master/node1/node2

#三台机器同时去修改相应的操作

1. 使用工具查看当前最适合的镜像的版本：
# kubeadm config images list
k8s.gcr.io/kube-apiserver:v1.22.1
k8s.gcr.io/kube-controller-manager:v1.22.1
k8s.gcr.io/kube-scheduler:v1.22.1
k8s.gcr.io/kube-proxy:v1.22.1
k8s.gcr.io/pause:3.5    #容器之间通信
k8s.gcr.io/etcd:3.5.0-0 
k8s.gcr.io/coredns/coredns:v1.8.4

2. 使用脚本快速安装镜像：
# for image in `kubeadm config images list` ; do docker pull $image; done

四、配置启动kubelet

master/node1/node2

#三台机器同时去修改相应的操作

1. 设置变量，获取docker-ce的Cgroup Drive：
# DOCKER_CGROUPS=$(docker info | grep 'Cgroup Drive' | cut -d' ' -f4)

# echo $DOCKER_CGROUPS
cgroupfs

2. 配置kubelet：
# vim  /etc/sysconfig/kubelet
KUBELET_EXTRA_ARGS="--cgroup-driver=cgroupfs --pod-infra-container-image=k8s.gcr.io/pause:3.5"
#注意：pause:3.5为你上方安装镜像的版本

3. 启动kubelet：
# systemctl daemon-reload
# systemctl enable kubelet && systemctl start kubelet

五、初始化集群

master

注意只是master做操作

1. 进行初始化：
[root@master ～# kubeadm init --kubernetes-version=v1.22.1 --pod-network-cidr=10.244.0.0/16 --apiserver-advertise-address=192.168.9.60 --ignore-preflight-errors=Swap
................
Your Kubernetes control-plane has initialized successfully!

To start using your cluster, you need to run the following as a regular user:

  mkdir -p $HOME/.kube
  sudo cp -i /etc/kubernetes/admin.conf $HOME/.kube/config
  sudo chown $(id -u):$(id -g) $HOME/.kube/config

Alternatively, if you are the root user, you can run:

  export KUBECONFIG=/etc/kubernetes/admin.conf

You should now deploy a pod network to the cluster.
Run "kubectl apply -f [podnetwork].yaml" with one of the options listed at:
  https://kubernetes.io/docs/concepts/cluster-administration/addons/

Then you can join any number of worker nodes by running the following on each as root:
#--------------------------------------------------------------------------------
kubeadm join 192.168.9.60:6443 --token 79sw3m.fedp436xmfqm3its \
    --discovery-token-ca-cert-hash sha256:15176715bf269c5d95df4eef62fcaf67b566a980230e1d44f8566e07c57c9f1a 
#--------------------------------------------------------------------------------
#这个要进行记录，这是Node节点加入到master上的一条命令

解析 
#version：是当前安装的统一版本 docker image ls
#-address：通告地址，为master的私网地址

2. 如果报错,按照下方进行清理环境,再执行初始化：
#先清理环境
[root@master ~]# kubeadm  reset -f
[root@master ~]# ipvsadm --clear
[root@master ~]# systemctl daemon-reload
[root@master ~]# systemctl restart kubelet
#在执行一遍

1. 不执行以下操作，集群加入master必失败：
[root@master ~]# rm -rf $HOME/.kube
[root@master ~]# mkdir -p $HOME/.kube
[root@master ~]# echo $HOME
/root
[root@master ~]# cp -i /etc/kubernetes/admin.conf $HOME/.kube/config
[root@master ~]# chown $(id -u):$(id -g) $HOME/.kube/config

2. 查看当前集群的成员：
[root@master ~]# kubectl get nodes
NAME     STATUS     ROLES                  AGE   VERSION
master   NotReady   control-plane,master   76m   v1.22.1

六、配置网络插件flannel

master

注意只是master做操作

1. 创建独立的目录：
[root@master flannel]# cd ~ && mkdir flannel && cd flannel

2. 获取yaml配置文件：
[root@master flannel]# curl -O https://raw.githubusercontent.com/coreos/flannel/master/Documentation/kube-flannel.yml

3. 将配置文件中的iamge镜像进行安装：
[root@master flannel]# for image in `grep 'image' kube-flannel.yml `; do docker pull $image; done

4. 修改yaml配置文件：
[root@master flannel]# vim kube-flannel.yml 
 containers:
      - name: kube-flannel
        image: quay.io/coreos/flannel:v0.14.0
        command:
        - /opt/bin/flanneld
        args:
        - --ip-masq
        - --kube-subnet-mgr
        - --iface=ens33     #填自己本机的网卡 ip a

5. yaml配置文件生效：
[root@master flannel]#  kubectl apply -f ~/flannel/kube-flannel.yml

6. 查看名称空间
[root@master flannel]# kubectl get pods --namespace kube-system 
NAME                             READY   STATUS    RESTARTS   AGE
coredns-78fcd69978-nkxhc         1/1     Running   0          8m6s  
coredns-78fcd69978-s5f2t         1/1     Running   0          8m6s
etcd-master                      1/1     Running   0          57m
kube-apiserver-master            1/1     Running   0          57m
kube-controller-manager-master   1/1     Running   0          57m
kube-flannel-ds-4hx6r            1/1     Running   0          13m
kube-flannel-ds-5hjkr            1/1     Running   0          13m
kube-flannel-ds-b8pfn            1/1     Running   0          13m
kube-proxy-q8mck                 1/1     Running   0          53m
kube-proxy-tbcpl                 1/1     Running   0          53m
kube-proxy-wjqpx                 1/1     Running   0          57m
kube-scheduler-master            1/1     Running   0          57m


# kubectl get service

# kubectl get svc --namespace kube-system

#====================================================================================
#问题解决：Pod一直显示"ContainerCreate",有可能是Node节点的空间不足,登入节点,清除缓存
[root@node1 ~]# free -mh
              total        used        free      shared  buff/cache   available
Mem:           4.0G        392M        637M        9.0M        3.0G        3.2G
Swap:            0B          0B          0B

[root@node1 ~]# echo 3 > /proc/sys/vm/drop_caches 

[root@node1 ~]# free  -mh
              total        used        free      shared  buff/cache   available
Mem:           4.0G        373M        3.3G        9.0M        299M        3.3G
Swap:            0B          0B          0B

⛔注意：如果一直显示ContainerCreate，不要去着急，有可能是在下载镜像，等个几分钟...........

七、配置所有node节点加入集群

node1/node2

注意这里是Node节点

1. 使用命令加入Master集群(此命令为k8s初始化成功时的最后最后一个命令)
[root@node1 ~]# kubeadm join 192.168.9.60:6443 --token 79sw3m.fedp436xmfqm3its --discovery-token-ca-cert-hash sha256:15176715bf269c5d95df4eef62fcaf67b566a980230e1d44f8566e07c57c9f1a

[root@node2 ~]# kubeadm join 192.168.9.60:6443 --token 79sw3m.fedp436xmfqm3its --discovery-token-ca-cert-hash sha256:15176715bf269c5d95df4eef62fcaf67b566a980230e1d44f8566e07c57c9f1a

八、集群检测

master

[root@master flannel]# kubectl get nodes
NAME     STATUS   ROLES                  AGE     VERSION
master   Ready    control-plane,master   5h16m   v1.22.1
node1    Ready    <none>                 80s     v1.22.1
node2    Ready    <none>                 65s     v1.22.1

九、kubelet补全命令

master

如果之前安装了bash-completion，不用直接重启，退出当前shell直接生效
# yum -y install bash-completion
# source <(kubectl completion bash)
# echo "source <(kubectl completion bash)" >> ~/.bashrc
# reboot

K8S/Kubernetes

K8S/Kubernetes社区为您提供最前沿的新闻资讯和知识内容

更多推荐

【深度】阿里巴巴万级规模 K8s 集群全局高可用体系之美

作者 | 韩堂、柘远、沉醉来源 | 阿里巴巴云原生公众号前言台湾作家林清玄在接受记者采访的时候，如此评价自己 30 多年写作生涯：“第一个十年我才华横溢，‘贼光闪现’，令周边黯然失色；第二个十年，我终于‘宝光现形’，不再去抢风头，反而与身边的美丽相得益彰；进入第三个十年，繁华落尽见真醇，我进入了‘醇光初现’的阶段，真正体味到了境界之美”。长夜有穷，真水无香。领略过了 K8s“身在江

K8S/Kubernetes

如何基于 K8s 构建下一代 DevOps 平台？

作者 | 孙健波（天元）导读：当前云原生 DevOps 体系现状如何？面临哪些挑战？如何通过 OAM 解决云原生 DevOps 场景下的诸多问题？云原生开发应用模型 OAM(Open Application Model) 社区核心成员孙健波将为大家一一解答，并分享如何基于 OAM 和 Kubernetes 打造无限能力的下一代 DevOps 平台。什么是 DevOps？为什么基于 Kub