什么是Istio
Istio是Service Mesh(服務網格)的主流實現方案。該方案降低了與微服務架構相關的復雜性,並提供了負載均衡、服務發現、流量管理、斷路器、監控、故障注入和智能路由等功能特性。
其中,Sidecar模式是一種將應用功能從應用本身剝離出來作為單獨進程的方式。該模式允許我們向應用無侵入添加多種功能,避免了為滿足第三方組件需求而向應用添加額外的配置代碼。從某種意義上來說,服務對於網絡是無感知的,只知道所附加的sidecar代理,它將網絡依賴抽象成了Sidecar。
在Service Mesh中,我們需要了解Data Plane和Control Plane兩個概念:
- Data Plane:作用是處理網格內服務間的通信,並完成服務發現、負載均衡、流量管理、健康檢查等功能;
- Control Plane:作用是管理和配置策略用於路由流量,同時也在運行期執行策略。
Istio核心組件
- Envoy:Istio 使用 Envoy調解服務網格中所有服務的入站和出站流量。屬於數據平面。
- Mixer:負責在服務網格上執行訪問控制和使用策略,以及收集從Envoy和其他服務自動監控到的數據。
- Pilot:為 Envoy sidecar 提供服務發現功能,為智能路由(例如 A/B 測試、金絲雀部署等)和彈性(超時、重試、熔斷器等)提供流量管理功能。屬於控制平面。
- Citadel:提供訪問控制和用戶身份認證功能。
Istio可視化管理組件
-
Vistio:用於近乎實時地監控應用程序和集群之間的網絡流量。
可以參考:https://www.yangcs.net/posts/vistio-visualize-your-istio-mesh-using-netflixs-vizceral/ -
Kiali:提供可視化服務網格拓撲、斷路器和請求率等功能。Kiali還包括 Jaeger Tracing,可以提供開箱即用的分布式跟蹤功能。
可以參考:https://jimmysong.io/istio-handbook/setup/istio-observability-tool-kiali.html -
jaeger:用於展示istio微服務調用鏈關系,以及微服務工作狀態監測。注意,在生產環境中,你應當使用Elasticsearch或cassandra持久化存儲jaeger數據。
可以參考:https://blog.csdn.net/ywq935/article/details/80599297
https://mathspanda.github.io/2018/09/19/jaeger-deploy/
https://blog.frognew.com/2017/12/opentracing-jaeger-3.html
其中,Kiali、Jaeger、prometheus、grafana管理工具,將和Istio一並部署。
使用Helm部署Istio
依賴環境
Helm > 2.10
Kubernetes > 1.9
下載並解壓縮istio的發布包
1 |
wget https://github.com/istio/istio/releases/download/1.0.6/istio-1.0.6-linux.tar.gz |
Istio的Chart在istio-1.0.6/install/kubernetes/helm目錄中,這個Chart包含了下面的代碼文件
1 |
# tree install/kubernetes/helm/istio |
如果安裝的Helm版本高於2.10,就不再需要手動使用kubectl安裝Istio的CRD。反之,則需要執行如下命令安裝
1 |
kubectl apply -f install/kubernetes/helm/istio/templates/crds.yaml |
查看安裝的CRD
1 |
kubectl get CustomResourceDefinition |
通過各個組件在vaule file的enabled flag啟用或禁用,下面創建名稱為istio.yaml的vaule file,將幾個默認禁用的組件也啟用
1 |
tracing: |
首先,創建名稱為kiali的secret。
1 |
|
1 |
|
1 |
|
執行helm安裝命令
1 |
helm install install/kubernetes/helm/istio --name istio --namespace istio-system -f istio.yaml |
安裝完成后確認各個組件的Pod正常運行
1 |
# kubectl get pod -n istio-system |
Istio 以一個項目的形式部署到 Kubernetes 集群中。我們可以看到,部署好的 pods 中,除了有 istio-citadel、istio-egressgateway、istio-ingressgateway、istio-pilot 等 Istio 本身的功能組件,還集成了微服務相關的監控工具,如:grafana、jaeger-agent、kiali、prometheus。正是這些功能豐富且強大的監控工具,幫助 Istio實現了微服務的可視化管理。
運行示例Bookinfo
您可以部署自己的應用或者示例應用程序如 Bookinfo。 注意:應用程序必須使用 HTTP/1.1 或 HTTP/2.0 協議來傳遞 HTTP 流量,因為 HTTP/1.0 已經不再支持。
如果運行 Pod 的 namespace 被標記為 istio-injection=enabled 的話,Istio-Initializer 會向應用程序的 Pod 中自動注入 Envoy 容器:
1 |
kubectl label namespace <namespace> istio-injection=enabled |
如果您沒有安裝 Istio-initializer-injector 的話,您必須使用 istioctl kube-inject 命令在部署應用之前向應用程序的 Pod 中手動注入 Envoy 容器:
1 |
kubectl create -f <(istioctl kube-inject -f <your-app-spec>.yaml) |
Bookinfo 應用由四個單獨的微服務構成,用來演示多種 Istio 特性,包含:
- productpage :productpage 微服務會調用 details 和 reviews 兩個微服務,用來生成頁面。
- details :這個微服務包含了書籍的信息。
- reviews :這個微服務包含了書籍相關的評論。它還會調用 ratings 微服務。
- ratings :ratings 微服務中包含了由書籍評價組成的評級信息。
reviews 微服務有 3 個版本:
- v1 版本不會調用 ratings 服務。
- v2 版本會調用 ratings 服務,並使用 1 到 5 個黑色星形圖標來顯示評分信息。
- v3 版本會調用 ratings 服務,並使用 1 到 5 個紅色星形圖標來顯示評分信息。
運行示例bookinfo,並開啟Sidecar自動注入。
1 |
|
訪問productpage
http://172.16.0.180:31380/productpage
31380端口可以通過命令獲取
1 |
kubectl -n istio-system get svc istio-ingressgateway -o jsonpath='{.spec.ports[0].nodePort}' |
使用Ingress暴露管理服務
完成Istio的安裝后,可以看到安裝的組件除了Istio架構中的數據平面和控制平面的各個核心組件,還部署了Prometheus、Grafana、Jaeger、Kiali等輔助組件。 在雲原生生態中,我們已經對這些組件很熟悉了。
- Prometheus:監控系統,收集Istio的監控數據
- Grafana:監控信息的圖表展現,Istio部署的Grafana為我們內置了各個組件相關的Dashboard
- Jaeger:分布式跟蹤系統,Istio中集成Jaeger可以對基於Istio的微服務實現調用鏈跟蹤、依賴分析,為性能優化和故障排查提供支持
- kiali:kiali作為Istio的可視化管理工具,可以認為是Istio的UI,可以展現服務的網絡拓撲、服務的容錯情況(超時、重試、短路等)、分布式跟蹤等
這些輔助組件都有自己的web界面,這里我們使用ingress的方式將這些組件暴露到集群外,以便在集群外部訪問。Istio支持使用自帶的istio-ingressgateway將服務暴露到集群外部,這個和Kubernetes中暴露Ingress Controller類似,有很多種方式,如NodePort,LoadBalancer,或直接開啟hostNetwork: true等等。為了便於統一管理K8s集群中的服務暴露,筆者更傾向使用Traefik Ingress。
使用Ingress暴露istio服務
編寫ingress yaml文件,如下
1 |
# cat istio-ingress.yaml |
執行部署命令
1 |
kubectl apply -f istio-ingress.yaml |
外部客戶端,配置hosts地址解析,如下
1 |
172.16.0.180 istio.prometheus.com |
訪問jaeger
瀏覽器訪問Jaeger之前可以多次刷新productpage頁面以便產生訪問請求等。選擇productpage.default可以查看整個調用鏈。使用istio.jaeger-query.com域名訪問,結果展示:
訪問kiali
使用域名istio.kiali.com訪問kiali頁面。用戶名admin,密碼1f2d1e2e67df。
訪問prometheus
使用域名istio.prometheus.com訪問prometheus頁面。
訪問grafana
使用域名istio.grafana.com訪問prometheus頁面。
Istio 對 Pod 和服務的要求
要成為服務網格的一部分,Kubernetes 集群中的 Pod 和服務必須滿足以下幾個要求:
- 需要給端口正確命名:服務端口必須進行命名。端口名稱只允許是<協議>[-<后綴>-]模式;
- Pod必須關聯到 Kubernetes服務:如果一個 Pod 屬於多個服務,這些服務不能再同一端口上使用不同協議,例如 HTTP 和 TCP。
- Deployment應帶有app以及version標簽:每個 Deployment 都應該有一個有意義的 app 標簽和一個用於標識 Deployment 版本的 version 標簽。Istio 會用 app 和 version 標簽來給監控指標數據加入上下文信息。
總結
本文實踐了使用istio官方提供的helm chart在Kubernetes上部署Istio 1.0.6的過程,並使用traefik ingress將Istio集成的Prometheus、Grafana、Jaeger、Kiali等輔助組件暴露到集群外部,並對進入集群的流量進行管理。
在生產環境中,如果是基於公有雲,如阿里雲、AWS等運行Istio,建議Ingress的IP地址使用ELB地址;如果是自建的平台,則建議使用HAproxy+Keepalived提供的VIP地址,作為Ingress的IP地址,實現高可用。
如果Ingress服務,需要暴露在公網,應當使用CA認證機構頒發的證書https化(如使用cert-manager)。此外建議使用NFS、Ceph等方案實現Istio監控以及微服務應用的數據持久化存儲。