微服務和事件驅動

微服務和事件驅動

例：在電商業務的下訂單凍結庫存場景。需要根據庫存情況確定訂單是否成交。假設你已經采用了分布式系統，這里訂單模塊和庫存模塊是兩個服務，分別擁有自己的存儲（關系型數據庫）。

在一個數據庫的時候，一個事務就能搞定兩張表的修改，但是微服務中，就沒法這么做了。在DDD理念中，一次事務只能改變一個聚合內部的狀態，如果多個聚合之間需要狀態一致，那么就要通過最終一致性。

訂單和庫存明顯是分屬於兩個不同的限界上下文的聚合，這里需要實現最終一致性，就需要使用事件驅動的架構。

事件驅動實現最終一致性

事件驅動架構在領域對象之間通過異步的消息來同步狀態，有些消息也可以同時發布給多個服務，在消息引起了一個服務的同步后可能會引起另外消息，事件會擴散開。嚴格意義上的事件驅動是沒有同步調用的。

例子：在訂單服務新增訂單后，訂單的狀態是“已開啟”，然后發布一個Order Created事件到消息隊列上

庫存服務在接收到Order Created 事件后，將庫存表格中的某sku減掉可銷售庫存，增加訂單占用庫存，然后再發送一個Inventory Locked事件給消息隊列

訂單服務接收到Inventory Locked事件，將訂單的狀態改為“已確認”

有人問，如果庫存不足，鎖定不成功怎么辦？  簡單，庫存服務發送一個Lock Fail事件， 訂單服務接收后，把訂單置為“已取消”。

好消息，我們可以不用鎖！事件驅動有個很大的優勢就是取消了並發，所有請求都是排隊進來，這對我們實施充血模型有很大幫助，我們可以不需要自己來管理內存中的鎖了。取消鎖，隊列處理效率很高，事件驅動可以用在高並發場景下，比如搶購。

是的，用戶體驗有改變，用了這個事件驅動，用戶的體驗有可能會有改變，比如原來同步架構的時候沒有庫存，就馬上告訴你條件不滿足無法下單，不會生成訂單；但是改了事件機制，訂單是立即生成的，很可能過了一會系統通知你訂單被取消掉。 就像搶購“小米手機”一樣，幾十萬人在排隊，排了很久告訴你沒貨了，明天再來吧。如果希望用戶立即得到結果，可以在前端想辦法，在BFF（Backend For Frontend）使用CountDownLatch這樣的鎖把后端的異步轉成前端同步，當然這樣BFF消耗比較大。

沒辦法，產品經理不接受，產品經理說用戶的體驗必須是沒有庫存就不會生成訂單，這個方案會不斷的生成取消的訂單，他不能接受，怎么辦？那就在訂單列表查詢的時候，略過這些“已取消”狀態的訂單吧，也許需要一個額外的視圖來做。我並不是一個理想主義者，解決當前的問題是我首先要考慮的，我們設計微服務的目的是本想是解決業務並發量。而現在面臨的卻是用戶體驗的問題，所以架構設計也是需要妥協的:(  但是至少分析完了，我知道我妥協在什么地方，為什么妥協，未來還有可能改變。

多個領域多表Join查詢

• 我個人認為聚合根這樣的模式對修改狀態是特別合適，但是對搜索數據的確是不方便，比如篩選出一批符合條件的訂單這樣的需求，本身聚合根對象不能承擔批量的查詢任務，因為這不是他的職責。那就必須依賴“領域服務（Domain Service）”這種設施。

當一個方法不便放在實體或者值對象上，使用領域服務便是最佳的解決方法，請確保領域服務是無狀態的。

• 我們的查詢任務往往很復雜，比如查詢商品列表，要求按照上個月的銷售額進行排序； 要按照商品的退貨率排序等等。但是在微服務和DDD之后，我們的存儲模型已經被拆離開，上述的查詢都是要涉及訂單、用戶、商品多個領域的數據。如何搞？  此時我們要引入一個視圖的概念。比如下面的，查詢用戶名下訂單的操作，直接調用兩個服務自己在內存中join效率無疑是很低的，再加上一些filter條件、分頁，沒法做了。於是我們將事件廣播出去，由一個單獨的視圖服務來接收這些事件，並形成一個物化視圖（materialized view），這些數據已經join過，處理過，放在一個單獨的查詢庫中，等待查詢，這是一個典型的以空間換時間的處理方式。

• 經過分析，除了簡單的根據主鍵Find或者沒有太多關聯的List查詢，我們大部分的查詢任務可以放到單獨的查詢庫中，這個查詢庫可以是關系數據庫的ReadOnly庫，也可以是NoSQL的數據庫，實際上我們在項目中使用了ElasticSearch作為專門的查詢視圖，效果很不錯

限界上下文（Bounded Context）和數據耦合

• 除了多領域join的問題，我們在業務中還會經常碰到一些場景，比如電商中的商品信息是基礎信息，屬於單獨的BC，而其他BC，不管是營銷服務、價格服務、購物車服務、訂單服務都是需要引用這個商品信息的。但是需要的商品信息只是全部的一小部分而已，營銷服務需要商品的id和名稱、上下架狀態；訂單服務需要商品id、名稱、目錄、價格等等。這比起商品中心定義一個商品（商品id、名稱、規格、規格值、詳情等等）只是一個很小的子集。這說明不同的限界上下文的同樣的術語，但是所指的概念不一樣。  這樣的問題映射到我們的實現中，每次在訂單、營銷模塊中直接查詢商品模塊，肯定是不合適，因為

• 商品中心需要適配每個服務需要的數據，提供不同的接口

• 並發量必然很大

• 服務之間的耦合嚴重，一旦宕機、升級影響的范圍很大。特別是最后一條，嚴重限制了我們獲得微服務提供的優勢“松耦合、每個服務自己可以頻繁升級不影響其他模塊”。這就需要我們通過事件驅動方法，適當冗余一些數據到不同的BC去，把這種耦合拆解開。這種耦合有時候是通過Value Object嵌入到實體中的方式，在生成實體的時候就冗余，比如訂單在生成的時候就冗余了商品的信息；有時候是通過額外的Value Object列表方式，營銷中心冗余一部分相關的商品列表數據，並隨時關注監聽商品的上下級狀態，同步替換掉本限界上下文的商品列表。

• 下圖一個下單場景分析，在電商系統中，我們可以認為會員和商品是所有業務的基礎數據，他們的變更應該是通過廣播的方式發布到各個領域，每個領域保留自己需要的信息。

保證最終一致性

最終一致性成功依賴很多條件

• 依賴消息傳遞的可靠性，可能A系統變更了狀態，消息發到B系統的時候丟失了，導致AB的狀態不一致

• 依賴服務的可靠性，如果A系統變更了自己的狀態，但是還沒來得及發送消息就掛了。也會導致狀態不一致我記得JavaEE規范中的JMS中有針對這兩種問題的處理要求，一個是JMS通過各種確認消息（Client Acknowledge等）來保證消息的投遞可靠性，另外是JMS的消息投遞操作可以加入到數據庫的事務中-即沒有發送消息，會引起數據庫的回滾（沒有查資料，不是很准確的描述，請專家指正）。不過現在符合JMS規范的MQ沒幾個，特別是保一致性需要降低性能，現在標榜高吞吐量的MQ都把問題拋給了我們自己的應用解決。所以這里介紹幾個常見的方法，來提升最終一致性的效果。

使用本地事務

還是以上面的訂單扣取信用的例子

• 訂單服務開啟本地事務，首先新增訂單；

• 然后將Order Created事件插入一張專門Event表，事務提交；

• 有一個單獨的定時任務線程，定期掃描Event表，掃出來需要發送的就丟到MQ，同時把Event設置為“已發送”。

方案的優勢是使用了本地數據庫的事務，如果Event沒有插入成功，那么訂單也不會被創建；線程掃描后把event置為已發送，也確保了消息不會被漏發（我們的目標是寧可重發，也不要漏發，因為Event處理會被設計為冪等）。缺點是需要單獨處理Event發布在業務邏輯中，繁瑣容易忘記；Event發送有些滯后；定時掃描性能消耗大，而且會產生數據庫高水位隱患；
我們稍作改進，使用數據庫特有的MySQL Binlog跟蹤（阿里的Canal）或者Oracle的GoldenGate技術可以獲得數據庫的Event表的變更通知，這樣就可以避免通過定時任務來掃描了

不過用了這些數據庫日志的工具，會和具體的數據庫實現（甚至是特定的版本）綁定，決策的時候請慎重。

使用Event Sourcing 事件溯源

事件溯源對我們來說是一個特別的思路，他並不持久化Entity對象，而是只把初始狀態和每次變更的Event記錄下來，並在內存中根據Event還原Entity對象的最新狀態，具體實現很類似數據庫的Redolog的實現，只是他把這種機制放到了應用層來。雖然事件溯源有很多宣稱的優勢，引入這種技術要特別小心，首先他不一定適合大部分的業務場景，一旦變更很多的情況下，效率的確是個大問題；另外一些查詢的問題也是困擾。我們僅僅在個別的業務上探索性的使用Event Souring和AxonFramework，由於實現起來比較復雜，具體的情況還需要等到實踐一段時間后再來總結，也許需要額外的一篇文章來詳細描述。