centos安裝搭建k8s 1.18.1並使用flannel

一:概述

主從節點

      我選擇了官方的 Kubeadm 主要是不同的 Kubernetes 版本都有一些差異，Kubeadm 更新與支持的會好一些。Kubeadm 是 Kubernetes 官方提供的快速安裝和初始化 Kubernetes 集群的工具.

      在創建Kubernetes集群時，阿里雲容器服務提供兩種網絡插件：Terway和Flannel。
      Flannel：使用的是簡單穩定的社區的Flannel CNI 插件，配合阿里雲的VPC的高速網絡，能給集群高性能和穩定的容器網絡體驗，但功能偏簡單，支持的特性少，例如：不支持基於Kubernetes標准的Network Policy。
     Terway：是阿里雲容器服務自研的網絡插件，將阿里雲的彈性網卡分配給容器，支持基於Kubernetes標准的NetworkPolicy來定義容器間的訪問策略，支持對單個容器做帶寬的限流。對於不需要使用Network Policy的用戶，可以選擇Flannel，其他情況建議選擇Terway。
 
注意:請您確保每台服務器CPU至少是2核，內存2G

二：准備工作

注意:以下准備工作在所有的主從節點都必須執行

1.關閉防火牆

我們需要開啟Kubernetes各組件所需端口，會有很多這里為了方便起見把主從各個節點的防火牆關閉

# systemctl stop firewalld
# systemctl disable firewalld

2.禁用SELINUX

# 永久禁用
# vim /etc/selinux/config
  SELINUX=disabled

3.修改k8s.conf文件

# cat <<EOF >  /etc/sysctl.d/k8s.conf
net.bridge.bridge-nf-call-ip6tables = 1
net.bridge.bridge-nf-call-iptables = 1
EOF

# sysctl --system

4.開啟路由轉發

# echo 1 > /proc/sys/net/ipv4/ip_forward

5.關閉swap

方式1:：

# Vi /etc/fstab

注釋掉 SWAP 的自動掛載,重啟后生效
方式2:

# sed -i 's/enforcing/disabled/' /etc/selinux/config

6.安裝docker

可以參考菜鳥教程安裝。不過多講述

7.修改主機名

其余幾點以此類推

# 主節點修改
# hostnamectl set-hostname k8s-master

# 從節點修改
# hostnamectl set-hostname k8s-node01

三:安裝kubeadm，kubelet，kubectl

注意:主從節點都必須安裝

1.修改yum安裝源

# cat <<EOF > /etc/yum.repos.d/kubernetes.repo
[kubernetes]
name=Kubernetes
baseurl=https://mirrors.aliyun.com/kubernetes/yum/repos/kubernetes-el7-x86_64/
enabled=1
gpgcheck=1
repo_gpgcheck=1
gpgkey=https://mirrors.aliyun.com/kubernetes/yum/doc/yum-key.gpg https://mirrors.aliyun.com/kubernetes/yum/doc/rpm-package-key.gpg
EOF

2.安裝軟件

安裝版本是1.18.1

# yum install -y kubelet-1.18.1-0 kubeadm-1.18.1-0 kubectl-1.18.1-0
# systemctl enable kubelet && systemctl start kubelet

以上是主從節點都需要操作的部分

四；初始化Master節點

1.運行初始化命令

注意修改apiserver-advertise-address為master節點ip

# kubeadm init --kubernetes-version=1.18.1 \
--apiserver-advertise-address=192.168.128.130 \
--image-repository registry.aliyuncs.com/google_containers \
--service-cidr=10.1.0.0/16 \
--pod-network-cidr=10.244.0.0/16

 
 
參數解釋:

–kubernetes-version: 用於指定k8s版本；
–apiserver-advertise-address：用於指定kube-apiserver監聽的ip地址,就是 master本機IP地址。
–pod-network-cidr：用於指定Pod的網絡范圍； 10.244.0.0/16
–service-cidr：用於指定SVC的網絡范圍；
–image-repository: 指定阿里雲鏡像倉庫地址

輸出信息:注意保存后面會用到

Your Kubernetes control-plane has initialized successfully!

To start using your cluster, you need to run the following as a regular user:

  mkdir -p $HOME/.kube
  sudo cp -i /etc/kubernetes/admin.conf $HOME/.kube/config
  sudo chown $(id -u):$(id -g) $HOME/.kube/config

You should now deploy a pod network to the cluster.
Run "kubectl apply -f [podnetwork].yaml" with one of the options listed at:
  https://kubernetes.io/docs/concepts/cluster-administration/addons/

Then you can join any number of worker nodes by running the following on each as root:

kubeadm join 10.57.2.206:6443 --token u6soxz.o0ch8mcgxmd4tlzd \
    --discovery-token-ca-cert-hash sha256:68f5cb3742ae5eea326570ac0ebcfc447cbd15f8b42b245500f94b9c2d7b2ecf 

 
 

2.配置kubectl工具

# mkdir -p $HOME/.kube
# cp -i /etc/kubernetes/admin.conf $HOME/.kube/config
# chown $(id -u):$(id -g) $HOME/.kube/config

3.安裝flannel

# mkdir k8s
# cd k8s
# wget https://raw.githubusercontent.com/coreos/flannel/master/Documentation/kube-flannel.yml

如果yml中的"Network": "10.244.0.0/16"和kubeadm init xxx --pod-network-cidr不一樣，就需要修改成一樣的。不然可能會使得Node間Cluster IP不通。

由於我上面的kubeadm init xxx --pod-network-cidr就是10.244.0.0/16。所以此yaml文件就不需要更改了。
 
現在這個文件好像是更新了，現在下來的不一樣我這里給出0.12.0的yml下載鏈接

鏈接：https://pan.baidu.com/s/1vd257TkZ-qJcPakARuM_KQ 
提取碼：4zzn 

查看yml需要的鏡像

# cat kube-flannel.yml |grep image|uniq
      image: quay.io/coreos/flannel:v0.12.0-amd64
      image: quay.io/coreos/flannel:v0.12.0-arm64
      image: quay.io/coreos/flannel:v0.12.0-arm
      image: quay.io/coreos/flannel:v0.12.0-ppc64le
      image: quay.io/coreos/flannel:v0.12.0-s390x

我們需要下載這些鏡像,命令如下

# docker pull registry.cn-shanghai.aliyuncs.com/leozhanggg/flannel:v0.12.0-amd64
# docker pull registry.cn-shanghai.aliyuncs.com/leozhanggg/flannel:v0.12.0-arm64
# docker pull registry.cn-shanghai.aliyuncs.com/leozhanggg/flannel:v0.12.0-arm
# docker pull registry.cn-shanghai.aliyuncs.com/leozhanggg/flannel:v0.12.0-ppc64le
# docker pull registry.cn-shanghai.aliyuncs.com/leozhanggg/flannel:v0.12.0-s390x

為鏡像打tag，保持和yml文件一樣。

# docker tag registry.cn-shanghai.aliyuncs.com/leozhanggg/flannel:v0.12.0-amd64 quay.io/coreos/flannel:v0.12.0-amd64
# docker tag registry.cn-shanghai.aliyuncs.com/leozhanggg/flannel:v0.12.0-arm64 quay.io/coreos/flannel:v0.12.0-arm64
# docker tag registry.cn-shanghai.aliyuncs.com/leozhanggg/flannel:v0.12.0-arm quay.io/coreos/flannel:v0.12.0-arm
# docker tag registry.cn-shanghai.aliyuncs.com/leozhanggg/flannel:v0.12.0-ppc64le quay.io/coreos/flannel:v0.12.0-ppc64le
# docker tag registry.cn-shanghai.aliyuncs.com/leozhanggg/flannel:v0.12.0-s390x quay.io/coreos/flannel:v0.12.0-s390x

<font color=:"red">注意：下載鏡像並且打tag這兩步驟需要在從節點執行，其余不用
 
 
加載flannel

# kubectl apply -f kube-flannel.yml

4.查看Pod狀態

這個需要一會,確保所有的Pod都處於Running狀態

# kubectl get pod --all-namespaces -o wide

設置開機自啟動

# systemctl enable kubelet

5.master命令補全

# yum install -y bash-completion
# source <(kubectl completion bash)
# echo "source <(kubectl completion bash)" >> ~/.bashrc
# source  ~/.bashrc

五:node加入集群

確保以上工作都執行完畢，進行如下操作

1.加入節點

在node節點執行，命令是我們初始化主節點時候的輸出信息，有保存的tocken

# kubeadm join 192.168.128.130:6443 --token rkt1p6.3m7z7pqfvaehxmxi \
    --discovery-token-ca-cert-hash sha256:dd384c51b5a38cce275dd3e178f6f1601b644f5fc2bc2f8cee9c2b031b119143

設置開機啟動

# systemctl enable kubelet

2.查看節點

在master執行

# kubectl get nodes -o wide

登錄到node節點，查看ip
會顯示出來flannel.1的網卡，用來做flannel網絡通信的

# ifconfig 

六:使用yml發布應用

以flaskapp為例子，兩個yml也在分享的資源里面
登錄master主節點，需要flaskapp-deployment.yaml和flaskapp-service.yaml
加載yml文件

# kubectl apply -f flaskapp-service.yaml
# kubectl apply -f flaskapp-deployment.yaml 

查看pod狀態,確保為Running狀態

# kubectl get pods -o wide

ping pod ip:ping這個ip確保能正常ping通，表示flannel網絡正常

# ping 10.244.2.2 -c 3

訪問頁面
使用master ip+nodeport訪問,或者使用node節點ip+nodeport也可以訪問。這里的應用端口是30005
效果如下: