centos7上基於kubernetes的docker集群管理

kubernetes和docker的作用這里就不作介紹了，直接進入主題。

本文的目的是搭建docker集群，並使用kubernetes管理它們。

文中的軟件環境除了kubernetes和docker,還用到了etcd和flannel。etcd服務運行在master機器上與minion機器上的flannel配套使用，作用是使每台minion上運行的

docker擁有不同的ip段，最終目的是使不同minion上正在運行的docker containner都有一個與別的任意一個containner（別的minion上運行的docker containner）不

一樣的IP地址。如果不能理解可以在網上搜一下etcd和flannel。

環境：

centos7系統機器三台：

    192.168.50.130: 用來安裝kubernetes master

    192.168.50.131: 用作kubernetes minion （minion1）

    192.168.50.132: 用作kubbernetes minion (minion2)

一、關閉系統運行的防火牆

如果系統開啟了防火牆則按如下步驟關閉防火牆（所有機器）

# systemctl stop firewalld
# systemctl disable firewalld

二、MASTER安裝配置

1. 安裝並配置Kubernetes master(yum 方式)

# yum -y install etcd kubernetes

    配置etcd，編輯/etc/etcd/etcd.conf。確保列出的這些項都配置正確並且沒有被注釋掉，下面的配置都是如此

ETCD_NAME=default
ETCD_DATA_DIR="/var/lib/etcd/default.etcd"
ETCD_LISTEN_CLIENT_URLS="http://0.0.0.0:2379"
ETCD_ADVERTISE_CLIENT_URLS="http://localhost:2379"

    配置kubernetes，編輯/etc/kubernetes/apiserver

KUBE_API_ADDRESS="--address=0.0.0.0"
KUBE_API_PORT="--port=8080"
KUBELET_PORT="--kubelet_port=10250"
KUBE_ETCD_SERVERS="--etcd_servers=http://127.0.0.1:2379"
KUBE_SERVICE_ADDRESSES="--service-cluster-ip-range=10.254.0.0/16"
KUBE_ADMISSION_CONTROL="--admission_control=NamespaceLifecycle,NamespaceExists,LimitRanger,SecurityContextDeny,ResourceQuota"
KUBE_API_ARGS=""

2. 啟動etcd, kube-apiserver, kube-controller-manager and kube-scheduler服務

# for SERVICES in etcd kube-apiserver kube-controller-manager kube-scheduler; do
    systemctl restart $SERVICES
    systemctl enable $SERVICES
    systemctl status $SERVICES 
done

3. etcd設置項（后面會被運行在minion上的flannel自動獲取並用來設置docker的IP地址）

# etcdctl mk /coreos.com/network/config '{"Network":"172.17.0.0/16"}'

    tips:/coreos.com/network/config只是配置項名稱，無需多慮

4. 至此master配置完成，運行kubectl get nodes可以查看有多少minion在運行，以及其狀態。這里我們的minion還都沒有開始安裝配置，所以運行之后結果為空

# kubectl get nodes
NAME             LABELS              STATUS

三、MINION安裝配置(每台minion機器都按如下安裝配置)

1. 環境安裝和配置

# yum -y install docker-engine flannel kubernetes

    配置flannel，編輯/etc/sysconfig/flanneld

FLANNEL_ETCD="http://192.168.50.130:2379"

   配置kubernetes，編輯/etc/kubernetes/config

KUBE_MASTER="--master=http://192.168.50.130:8080"

    配置kubernetes，編輯/etc/kubernetes/kubelet（請使用每台minion自己的IP地址比如：192.168.50.131代替下面的$LOCALIP）

KUBELET_ADDRESS="--address=0.0.0.0"
KUBELET_PORT="--port=10250"
# change the hostname to this host’s IP address
KUBELET_HOSTNAME="--hostname_override=$LOCALIP"
KUBELET_API_SERVER="--api_servers=http://192.168.50.130:8080"
KUBELET_ARGS=""

2. 准備啟動服務（如果本來機器上已經運行過docker的請看過來，沒有運行過的請忽略此步驟）

    運行ifconfig，查看機器的網絡配置情況（有docker0）

# ifconfig
docker0   Link encap:Ethernet  HWaddr 02:42:B2:75:2E:67  
          inet addr:172.17.0.1  Bcast:0.0.0.0  Mask:255.255.0.0
          UP BROADCAST MULTICAST  MTU:1500  Metric:1
          RX packets:0 errors:0 dropped:0 overruns:0 frame:0
          TX packets:0 errors:0 dropped:0 overruns:0 carrier:0
          collisions:0 txqueuelen:0 
          RX bytes:0 (0.0 B)  TX bytes:0 (0.0 B)

    warning:在運行過docker的機器上可以看到有docker0，這里在啟動服務之前需要刪掉docker0配置，在命令行運行:sudo ip link delete docker0

    這樣做的目的是重啟docker的時候由flannel給docker分配地址段。

3. 啟動服務

# for SERVICES in kube-proxy kubelet docker flanneld; do
    systemctl restart $SERVICES
    systemctl enable $SERVICES
    systemctl status $SERVICES 
done

    tips:在這里我碰到一個奇怪的問題，啟動kubelet服務或者flannel服務會出問題而不能啟動，如果你也碰到類似問題。可以嘗試卸載kubernetes，重新安裝配置一下

我是這么解決的，重裝一下就一切正常了^_^

四、配置完成驗證安裝

    確定兩台minion(192.168.50.131和192.168.50.132)和一台master（192.168.50.130）都已經成功的安裝配置並且服務都已經啟動了。

    切換到master機器上，運行命令kubectl get nodes 

# kubectl get nodes
NAME             LABELS                                  STATUS
192.168.50.131   kubernetes.io/hostname=192.168.50.131   Ready
192.168.50.132   kubernetes.io/hostname=192.168.50.132   Ready

    可以看到配置的兩台minion已經在master的node列表中了。如果想要更多的node，只需要按照minion的配置，配置更多的機器就可以了。

 

    至此一個由kubernetes管理的docker集群已經配置完成。下面一篇將會寫一下kubernetes控制minion運行docker container，關於kubernetes的Pod，Replication controller（rc）,Service的一些東西。