Go語言微服務開發框架:Go chassis


摘要:分布式系統中每個進程的動態配置管理及運行時熱加載就成為了一個亟待解決的問題。go chassis汲取了netflix的archaius框架經驗,並做出來自己的創新特性。

引言

https://github.com/go-chassis/go-chassis是一個微服務開發框架,而微服務開發框架帶來的其中一個課題就是:當單體應用向微服務轉型后,有大量的配置需要管理,而你並不希望登錄到遠端機器去更改配置,並重啟應用,尤其是現在已經是容器的時代了,也不希望因為一個配置的變更,而發布一個新的軟件包。那么分布式系統中每個進程的動態配置管理及運行時熱加載就成為了一個亟待解決的問題。https://github.com/go-chassis/go-archaius為go chassis而生,他汲取了netflix的archaius框架經驗,並做出來自己的創新特性。

架構

Source: 配置源是一種標准接口,可以通過實現一個source來接入不同配置源,它定義配置來自哪個資源,配置可以來自配置中心configcenter,來自本地文件,來自環境變量或是啟動命令行。source負責將配置項緩存到本地內存。用戶可以選擇加載任意的source實現。

Config center source: 配置中心源不同於其他source,它包含一個client抽象,可以對接不同的生態系統,目前對接了攜程開源的配置中心Apollo。

Config manager:負責整合管理所有source的配置,每個source可以定義優先級,當通過manager獲取配置時,如果2個不同的source有相同的配置,那么就會取最大優先級的配置。

Event Dispatcher:用戶可以通過Archaius API進行配置變化監聽,當source內部的配置項新增,更新,刪除配置時,都會通知到監聽器。

Source優先級:優先級由大到小依次為Config center,CLI,ENV,file,當有相同配置項的時候僅優先級大的配置生效。在一個分布式系統中,遠程的配置中心理應擁有最大優先級,而在本地運行一個獨立的進程時,通常的思維是,命令行參數優先級高於環境變量,高於本地文件內容。擁有了這樣一套機制后,用戶就無需再寫代碼處理配置項生效邏輯。

Config Factory: 封裝了event 和 config manager的API

Archaius API: 封裝底層實現,提供友好的API供開發者使用

獲取配置

獲取配置有2種不同的手段:

1. 調用archaius API的Get 方法

2. 注冊監聽器

事件的觸發是由soruce的開發者來決定的,每個source的行為會有不同:

命令行與環境變量是不會產生任何事件的,當archaius運行后配置項就已經定下來了,只能使用Get方法獲取。而文件source會在啟動后拉取一遍本地文件內容並轉換為配置項(可自定義轉換算法,決定配置項形態),之后持續監聽本地文件變化,當有變化發生時會刷新本地配置並通知到監聽器。所以2種方法都支持。config center source行為與文件又不同,在啟動后,它就會周期拉取配置中心的配置,並且對比每一次配置項的不同,並觸發不同類型事件。

配置項形態

假設程序有一個配置文件叫a.yaml,內容如下

registry:
  enabled: true
  interval: 30s復制代碼

要考慮該如何去對待這raw data,目前有2種方式

第一種,將配置項拆分為java properties風格的配置:

registry.refresh: true
registry.interval: 30s

go archaius開放了file handler接口,允許你決定如何將文件內容處理為配置項

那么在遠程的配置中心中,key value的管理方式就要遵循 file handler的行為,當你想變更registry.refresh時,就要在配置中心種更改這個配置項及值。

類似於開關類的配置項,這種java properties的管理方式還是不錯的,當一個配置項改變時觸發一次事件。

但是有一類配置項並不適合如此管理,這就是第二種方式,比如go chassis中的路由管理配置文件:

通常都需要大范圍的更改配置項,那么如果還使用切分的方式在配置中心中管理將會引起go archaius運行時大量的事件觸發,並且,用戶在使用體驗上大打折扣,到處去找分散的配置項,逐一更改。正確的行為是,將文件名作為配置中心中的key,文件內容作為value。用戶需要更改時,去找對應的文件名即可,修改后一次性下發,只會觸發一次事件,完成路由的變更。

開發者應根據實際場景判斷如何處理配置項形態。也可以自己實現handler來決定配置項形態

配置運行時熱加載

在運行時可以隨時通過統一的配置中心或者本地文件(不推薦分布式環境登到機器里改文件,但在本地debug時還是推薦使用文件來測試程序的熱加載邏輯)更改配置了,那么接下來要解決的問題就是配置在運行時生效。

這里的技巧是使用go語言中的讀寫鎖。我以go chassis中路由配置來說明

go chassis運行時總是會有不斷地大並發數據訪問router config這塊緩存,使用一個讀寫鎖lock中的讀鎖,每次訪問緩存都用讀鎖,使用后,解開讀鎖。

向archaius注冊監聽器,需要自己編寫監聽器的邏輯,每當事件出發后就會通過archaius中的數據構建一個結構體數據,然后將數據存到本地緩存,首先使用lock的寫鎖鎖住router config,更新后,解開寫鎖。

在這樣的機制下,就可以做到運行時熱加載配置項而無需重啟服務。

例子

一個本地文件事件監控的例子

https://github.com/go-chassis/go-archaius/tree/master/examples/event

管理本地多文件的例子

https://github.com/go-chassis/go-archaius/tree/master/examples/file

Go chassis介紹

https://juejin.im/post/6844903682362834952

本文分享自華為雲社區《Go語言分布式系統配置管理實踐--go archaius》,原文作者:APTX-486977 。

 

點擊關注,第一時間了解華為雲新鮮技術~


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM