k8s实战--redis主从--guestbook

快速入门

实验:通过服务自动发现的redis主从
难点:
1,服务的自动发现，即如何确定coreDNS 已生效
2,redis的主从验证

遇到的问题：
1,Can't handle RDB format version 9
解决：一般是低版本无法兼容高版本的 rdb 导致的。要求删除 dump.rdb文件，再启动 redis-server。 但是pod 中命令不足，所以自己新建镜像使用。
2,使用k8s 起的pod 和docker 起的容器，在容器内部 /etc/resolve.cnf内的ns 不同，docker 起的容器和系统保持一致，但是K8S 起的pod 使用的是CoreDNS 的ns
（即pod 内与外网隔绝，使用ip 也不行，这句可能不对，未查资料，仅现有环境测试）

验证k8s服务自动发现

一般k8s搭建正常后服务也正常

 kubectl   get   po  -n  kube-system
NAME                                 READY   STATUS    RESTARTS   AGE
coredns-5c98db65d4-j2925             1/1     Running   0          61m
coredns-5c98db65d4-k2rcj             1/1     Running   0          61m
etcd-k8s-master                      1/1     Running   0          60m
kube-apiserver-k8s-master            1/1     Running   0          60m
kube-controller-manager-k8s-master   1/1     Running   0          60m
kube-flannel-ds-amd64-6rq62          1/1     Running   0          60m
kube-flannel-ds-amd64-ctmdz          1/1     Running   0          59m
kube-proxy-kmgc5                     1/1     Running   0          61m
kube-proxy-ss8jr                     1/1     Running   0          59m
kube-scheduler-k8s-master            1/1     Running   0          60m

1，验证k8s CoreDNS搭建正常

## 起nginx 容器和服务测试

cat  tt-nginx.yml 
apiVersion: v1
kind: Pod
metadata:
  name: nginx
  labels:
    app: nginx
spec:
  containers:
  - name: nginx
    image: nginx
    ports:
    - containerPort: 80
---
apiVersion: v1
kind: Service
metadata:
  name: nginx
spec:
  ports:
  - port: 80
    targetPort: 80
    protocol: TCP
  selector:
    app: nginx

##起具有curl 和nslookup 工具的镜像测试
cat  curl-utils.yml 
apiVersion: v1
kind: Pod
metadata:
   name: curl-util
spec:
   containers:
   - name: curl-util
     image: radial/busyboxplus:curl
     command: 
     - sh 
     - -c 
     - while true ; do sleep 1 ;done

## 进入curl 工具容器测试
nslookup   nginx 

curl    nginx:80 

2，redis 简单主从和哨兵

#根据redis 镜像制作redis-slave  

cat  run.sh 
#!/bin/bash
if [[ ${GET_HOSTS_FROM:-dns} == "env" ]]; then
  redis-server --slaveof ${REDIS_MASTER_SERVICE_HOST} 6379
else
  redis-server --slaveof redis-master 6379
fi

#############################

cat Dockerfile 
FROM  redis
COPY  run.sh    /
RUN   chmod  +x  /run.sh
ENTRYPOINT ["/run.sh"]

docker build  -t  redis-slave-tt   .

---------------------------------------------------------------


##  redis-master  的RC和service 

 cat  redis-master.yml 
apiVersion: v1
kind: ReplicationController
metadata:
  name: redis-master
  labels:
    name: redis-master
spec:
  replicas: 1
  selector:
    name: redis-master
  template:
    metadata:
      labels:
        name: redis-master
    spec:
      containers:
      - name: master
        image: redis
        ports:
        - containerPort: 6379

---
apiVersion: v1
kind: Service
metadata:
  name: redis-master
  labels:
    name: redis-master
spec:
  ports:
  - port: 6379
    targetPort: 6379
  selector:
    name: redis-master



----------------------------------------------------

#redis-slave  的RC 
cat  redis-slave-controller.yaml 
apiVersion: v1
kind: ReplicationController
metadata:
  name: redis-slave
  labels:
    name: redis-slave
spec:
  replicas: 2
  selector:
    name: redis-slave
  template:
    metadata:
      labels:
        name: redis-slave
    spec:
      containers:
      - name: slave
        image: redis-slave-tt 
        imagePullPolicy: Never
        env:
        - name: GET_HOSTS_FROM
          value: dns
          # If your cluster config does not include a dns service, then to
          # instead access an environment variable to find the master
          # service's host, comment out the 'value: dns' line above, and
          # uncomment the line below.
          #value: env
        ports:
        - containerPort: 6379

 
##
注意：因为K8S 使用镜像是本地的，所以必须添加   imagePullPolicy: Never  属性
环境变量使用env 也可以



############
哨兵配置
生成本地镜像
cat sentinel.conf 
port 8332
daemonize no

sentinel deny-scripts-reconfig yes

sentinel monitor mymaster  redis-master   6379  2

sentinel config-epoch mymaster 0
# Generated by CONFIG REWRITE
dir "/data"
sentinel leader-epoch mymaster 0
sentinel current-epoch 0

cat  Dockerfile 
FROM redis
COPY sentinel.conf   /etc/sentinel.conf
CMD [ "redis-sentinel", "/etc/sentinel.conf" ]
EXPOSE 8332


生成镜像
docker  build  -t redis-sentinel  .


哨兵的服务配置
cat  redis-sentinel.yml 
apiVersion: v1
kind: ReplicationController
metadata:
  name: redis-sentinel
  labels:
    name: redis-sentinel
spec:
  replicas: 1
  selector:
    name: redis-sentinel
  template:
    metadata:
      labels:
        name: redis-sentinel
    spec:
      containers:
      - name: redis-sentinel
        image: redis-sentinel
        imagePullPolicy: Never
        ports:
        - containerPort: 8332

---
apiVersion: v1
kind: Service
metadata:
  name: redis-sentinel
  labels:
    name: redis-sentinel
spec:
  ports:
  - port: 8332
    targetPort: 8332
  selector:
    name: redis-sentinel

kubectl   create  -f  redis-sentinel.yml   查看 kubectl   get  po -o wide 
 进入容器查看
kubectl   exec  -it   redis-sentinel-npnn6   /bin/sh

redis-cli -p 8332

# Sentinel
sentinel_masters:1
sentinel_tilt:0
sentinel_running_scripts:0
sentinel_scripts_queue_length:0
sentinel_simulate_failure_flags:0
master0:name=mymaster,status=ok,address=10.108.41.72:6379,slaves=2,sentinels=1

其他

镜像拉取策略:
containers:
- name: uses-private-image
image: $PRIVATE_IMAGE_NAME
imagePullPolicy: Always
command: [ "echo", "SUCCESS" ]

Always 总是拉取镜像，每次下载最新的镜像
IfNotPresent 只有当本地没有的时候才去下载镜像
Never 只使用本地镜像，从不拉取，即使本地没有

如果省略imagePullPolicy 镜像tag为 :latest 策略为always ，否则 策略为 IfNotPresent

一些命令

kubectl cluster-info
kubectl -s https://172.20.7.132:6443 get componentstatuses
kubectl -s https://172.20.7.132:6443 get nodes
kubectl delete replicationcontroller xx xxx xx
kubectl delete service xxx xxx xx

POD

常用命令
kubectl get pod redis-master-v8zjx -o yaml
kubectl describe pod curl-util
kubectl delete pod pod-name
kubectl delete pod --all 批量删除全部pod

拉取私有镜像仓库需要的登陆；有2种方式：
1，所有node手工docker login
2 ,POD中添加Image Pull Secret 用于验证，
操作：

系统管理员设置全局的 image pull secret ,创建pod 时自动添加上

pod的启动命令

docker run 运行容器时没有指定容器的启动命令，容器则使用默认的Docker 镜像的启动命令。一般通过dockerfile 的CMD 和 ENTRYPOINT设置。

CMD命令可以覆盖，docker run 指定的启动命令会把CMD 命令覆盖。ENTRYPOINT设置的命令是一个入口，docker 指定的启动命令作为参数传递给ENTRYPOINT设置的命令，而不是进行替换。

pod的环境变量
设置容器运行时的环境变量

env:
- name: PAREMETER_1
  value:  value_1
- name: PAREMETER-2
  value: value_2

pod的YAML 文件
pod的网络
pod的重启策略
通过pod定义的.spec.restartPolicy设置:

pod 的状态和生命周期

使用kubectl describe pod pod-name 查看容器状态

生命周期的回调函数
PostStart :容器创建成功后调用
PreStop：容器终止前调用该回调函数

自定义检查pod
检查pod 是否健康，默认情况下只会检查容器是否正常运行，容器运行不代表应用正常运行

*调度pod
pod 分配到哪个node
支持的过滤函数

选择：
通过node 的label 选择

使用命令
kubectl label nodes kube-node- env=test
创建pod 时选择Node
nodeSelector:
env: test
或通过Node Name 直接指定：
nodeName: kube-node-1

事件查询
kubectl get event
kubectl describe pod my-pod

日志查询
kubectl logs pod-name container

远程连接容器
kubectl exec my-pod -- date pod 只有一个容器 不需要指定容器
直接进入 kubectl exec -it my-pod /bin/bash