Gitlab官方提供了 Helm 的方式在 Kubernetes 集群中來快速安裝，但是在使用的過程中發現 Helm 提供的 Chart 包中有很多其他額外的配置，所以我們這里使用自定義的方式來安裝，也就是自己來定義一些資源清單文件。
Gitlab主要涉及到3個應用：Redis、Postgresql、Gitlab 核心程序，實際上我們只要將這3個應用分別啟動起來，然后加上對應的配置就可以很方便的安裝 Gitlab 了，我們這里選擇使用的鏡像不是官方的，而是 Gitlab 容器化中使用非常多的一個第三方鏡像：sameersbn/gitlab，基本上和官方保持同步更新，地址：http://www.damagehead.com/docker-gitlab/
如果我們已經有可使用的 Redis 或 Postgresql 服務的話，那么直接配置在 Gitlab 環境變量中即可，如果沒有的話就單獨部署。
創建一個用於存儲密碼的secret文件:
創建username和password文件:
$ echo -n "admin" > ./username $ echo -n "1f2d1e2e67df" > ./password
用kubectl生成secret對象:
$ kubectl create secret generic db-user-pass --from-file=./username --from-file=./password secret "db-user-pass" created
創建PVC和storageclass做持久化:
apiVersion: v1 kind: PersistentVolumeClaim metadata: name: gitlab-redis-pvc namespace: kube-ops annotations: volume.beta.kubernetes.io/storage-class: "gitlab-storageclass" spec: accessModes: - ReadWriteMany resources: requests: storage: 1Gi
部署需要的 Redis 服務，對應的資源清單文件如下：(gitlab-redis.yaml)
apiVersion: apps/v1beta1 kind: Deployment metadata: name: redis namespace: kube-ops labels: name: redis spec: template: metadata: name: redis labels: name: redis spec: containers: - name: redis image: sameersbn/redis imagePullPolicy: IfNotPresent ports: - name: redis containerPort: 6379 volumeMounts: - mountPath: /var/lib/redis name: data livenessProbe: exec: command: - redis-cli - ping initialDelaySeconds: 30 timeoutSeconds: 5 readinessProbe: exec: command: - redis-cli - ping initialDelaySeconds: 5 timeoutSeconds: 1 volumes: - name: data persistentVolumeClaim: claimName: gitlab-redis-pvc --- apiVersion: v1 kind: Service metadata: name: redis namespace: kube-ops labels: name: redis spec: ports: - name: redis port: 6379 targetPort: redis selector: name: redis
vim gitlab-postgresql-pvc.yaml:
apiVersion: v1 kind: PersistentVolumeClaim metadata: name: gitlab-postgresql-pvc namespace: kube-ops annotations: volume.beta.kubernetes.io/storage-class: "gitlab-storageclass" spec: accessModes: - ReadWriteMany resources: requests: storage: 1Gi
然后是數據庫 Postgresql，對應的資源清單文件如下：(gitlab-postgresql.yaml)
apiVersion: apps/v1beta1 kind: Deployment metadata: name: postgresql namespace: kube-ops labels: name: postgresql spec: template: metadata: name: postgresql labels: name: postgresql spec: containers: - name: postgresql image: sameersbn/postgresql imagePullPolicy: IfNotPresent env: - name: DB_USER value: gitlab - name: DB_PASS value: passw0rd - name: DB_NAME value: gitlab_production - name: DB_EXTENSION value: pg_trgm ports: - name: postgres containerPort: 5432 volumeMounts: - mountPath: /var/lib/postgresql name: data livenessProbe: exec: command: - pg_isready - -h - localhost - -U - postgres initialDelaySeconds: 30 timeoutSeconds: 5 readinessProbe: exec: command: - pg_isready - -h - localhost - -U - postgres initialDelaySeconds: 5 timeoutSeconds: 1 volumes: - name: data persistentVolumeClaim: claimName: gitlab-postgresql-pvc --- apiVersion: v1 kind: Service metadata: name: postgresql namespace: kube-ops labels: name: postgresql spec: ports: - name: postgres port: 5432 targetPort: postgres selector: name: postgresql
vim gitlab-pvc.yaml
apiVersion: v1 kind: PersistentVolumeClaim metadata: name: gitlab-pvc namespace: kube-ops annotations: volume.beta.kubernetes.io/storage-class: "gitlab-storageclass" spec: accessModes: - ReadWriteMany resources: requests: storage: 1Gi
然后就是我們最核心的 Gitlab 的應用，對應的資源清單文件如下：(gitlab.yaml)
apiVersion: apps/v1beta1 kind: Deployment metadata: name: gitlab namespace: kube-ops labels: name: gitlab spec: template: metadata: name: gitlab labels: name: gitlab spec: containers: - name: gitlab image: sameersbn/gitlab:12.1.6 imagePullPolicy: IfNotPresent env: - name: TZ value: Asia/Shanghai - name: GITLAB_TIMEZONE value: Beijing - name: GITLAB_SECRETS_DB_KEY_BASE value: long-and-random-alpha-numeric-string - name: GITLAB_SECRETS_SECRET_KEY_BASE value: long-and-random-alpha-numeric-string - name: GITLAB_SECRETS_OTP_KEY_BASE value: long-and-random-alpha-numeric-string - name: GITLAB_ROOT_PASSWORD valueFrom: secretKeyRef: name: git-user-pass key: password # value: admin321 - name: GITLAB_ROOT_EMAIL value: 1369472116@qq.com - name: GITLAB_HOST value: gitlab.fuyuteng.com - name: GITLAB_PORT value: "80" - name: GITLAB_SSH_PORT value: "30022" - name: GITLAB_NOTIFY_ON_BROKEN_BUILDS value: "true" - name: GITLAB_NOTIFY_PUSHER value: "false" - name: GITLAB_BACKUP_SCHEDULE value: daily - name: GITLAB_BACKUP_TIME value: 01:00 - name: DB_TYPE value: postgres - name: DB_HOST value: postgresql - name: DB_PORT value: "5432" - name: DB_USER value: gitlab - name: DB_PASS value: passw0rd - name: DB_NAME value: gitlab_production - name: REDIS_HOST value: redis - name: REDIS_PORT value: "6379" ports: - name: http containerPort: 80 - name: ssh containerPort: 22 volumeMounts: - mountPath: /home/git/data name: data livenessProbe: httpGet: path: / port: 80 initialDelaySeconds: 180 timeoutSeconds: 5 readinessProbe: httpGet: path: / port: 80 initialDelaySeconds: 5 timeoutSeconds: 1 volumes: - name: data persistentVolumeClaim: claimName: gitlab-pvc --- apiVersion: v1 kind: Service metadata: name: gitlab namespace: kube-ops labels: name: gitlab spec: ports: - name: http port: 80 targetPort: http - name: ssh port: 22 targetPort: ssh nodePort: 30022 type: NodePort selector: name: gitlab --- apiVersion: extensions/v1beta1 kind: Ingress metadata: name: gitlab namespace: kube-ops annotations: kubernetes.io/ingress.class: traefik spec: rules: - host: gitlab.fuyuteng.com http: paths: - backend: serviceName: gitlab servicePort: http
我們這里應用數據都做數據持久化，還有敏感數據用了secret引入到環境變量,
比如添加 PV/PVC 或者 StorageClass。
要注意的是其中 Redis 和 Postgresql 相關的環境變量配置，另外，我們這里添加了一個 Ingress 對象，來為我們的 Gitlab 配置一個域名git.qikqiak.com，這樣應用部署完成后，我們就可以通過該域名來訪問了，然后直接部署即可：
$ kubectl create -f gitlab-redis.yaml gitlab-postgresql.yaml gitlab.yaml
創建完成后，查看 Pod 的部署狀態：
$ kubectl get pods -n kube-ops
NAME READY STATUS RESTARTS AGE
gitlab-7d855554cb-twh7c 1/1 Running 0 10m
postgresql-8566bb959c-2tnvr 1/1 Running 0 17h
redis-8446f57bdf-4v62p 1/1 Running 0 17h
可以看到都已經部署成功了，然后我們可以通過 Ingress 中定義的域名git.qikqiak.com(需要做 DNS 解析或者在本地 /etc/hosts 中添加映射)來訪問 Portal：
gitlab portal
使用用戶名 root，和部署的時候指定的超級用戶密碼GITLAB_ROOT_PASSWORD=admin321即可登錄進入到首頁：
gitlab homepage
Gitlab 運行后，我們可以注冊為新用戶並創建一個項目，還可以做很多的其他系統設置，比如設置語言、設置應用風格樣式等等。
點擊Create a project創建一個新的項目，和之前 Github 使用上沒有多大的差別：
create gitlab project
創建完成后，我們可以添加本地用戶的一個SSH-KEY，這樣我們就可以通過 SSH 來拉取或者推送代碼了。SSH 公鑰通常包含在~/.ssh/id_rsa.pub 文件中，並以ssh-rsa開頭。如果沒有的話可以使用ssh-keygen命令來生成，id_rsa.pub里面的內容就是我們需要的 SSH 公鑰，然后添加到 Gitlab 中。
由於平時使用的 ssh 默認是 22 端口，現在如果用默認的 22 端口去連接，是沒辦法和 Gitlab 容器中的 22 端口進行映射的，因為我們只是通過 Service 的 22 端口進行了映射，要想通過節點去進行 ssh 鏈接就需要在節點上一個端口和容器內部的22端口進行綁定，所以這里我們可以通過 NodePort 去映射 Gitlab 容器內部的22端口，比如我們將環境變量設置為GITLAB_SSH_PORT=30022，將 Gitlab 的 Service 也設置為 NodePort 類型：
apiVersion: v1 kind: Service metadata: name: gitlab namespace: kube-ops labels: name: gitlab spec: ports: - name: http port: 80 targetPort: http - name: ssh port: 22 targetPort: ssh nodePort: 30022 type: NodePort selector: name: gitlab 注意上面 ssh 對應的 nodePort 端口設置為 30022，這樣就不會隨機生成了，重新更新下 Deployment 和 Service，更新完成后，現在我們在項目上面 Clone 的時候使用 ssh 就會帶上端口號了：
gitlab ssh
現在就可以使用Clone with SSH的地址了，由於上面我們配置了 SSH 公鑰，所以就可以直接訪問上面的倉庫了：
$ git clone ssh://git@git.qikqiak.com:30022/root/gitlab-demo.git Cloning into 'gitlab-demo'... warning: You appear to have cloned an empty repository. Checking connectivity... done. 然后隨便在該項目下面添加一些資源：
$ echo "# hello world" > README.md $ git add . $ git commit -m 'hello world' [master (root-commit) 63de7cb] hello world 1 file changed, 1 insertion(+) create mode 100644 README.md $ git push origin master Counting objects: 3, done. Writing objects: 100% (3/3), 224 bytes | 0 bytes/s, done. Total 3 (delta 0), reused 0 (delta 0) To ssh://git@git.qikqiak.com:30022/root/gitlab-demo.git * [new branch] master -> master 然后刷新瀏覽器，就可以看到剛剛創建的 Git 倉庫中多了一個 README.md 的文件：
