作者|肯夢
當下比較成功的企業已然認識到,要想最大限度提升運營效率和客戶體驗,務必將業務和技術兩方面的舉措緊密結合起來。運營事件或業務形勢的變化是時下眾多企業關注的焦點,這些變化能夠為企業領導者帶來切實有用的信息,而架構設計的主旨恰恰是從客戶聯系人、交易、運營等方面的信息中獲取洞見,兩者相輔相成。傳統技術歷來對企業從事件中獲取洞見的速度有着諸多限制,比如用於記錄、收集和處理此類事件的批處理 ETL(提取、轉換、加載)。
事件驅動型架構 (EDA) 方興未艾,作為一種 Serverless 化的應用概念對雲原生架構具有着深遠影響。當我們討論到一個具體架構時,首當其沖的是它的發展是否具有技術先進性。這里從我們熟悉的 MVC 架構,SOA 架構談起,聊一聊關於消息事件領域的歷史與發展趨勢。
消息事件領域的發展趨勢
早在 2018 年,Gartner 評估報告將 Event-Driven Model 列為 10 大戰略技術趨勢之一,事件驅動架構(EDA)將成為未來微服務的主流,並做出以下斷言:
- 到 2022 年,事件通知的軟件模型將成為超過 60% 的新型數字化商業的解決方案;
- 到 2022 年,超過 50% 的商業組織將參與到事件驅動的數字化商業服務的生態系統當中;
George Santayana 在《 The Life of Reason》曾提到, Those who fail to learn History are doomed to repeat it.(不懂歷史的人注定會重蹈覆轍)。我們以史為鑒,來看看為什么會架構會演進到事件驅動。
架構本身沒有優劣之分,它本身就是一組技術決策,決定后續項目的所有功能開發(框架,編碼規范,文檔,流程….),這里聊聊為什么會引入某些框架,這個框架解決了軟件開發中的什么問題。
- 單體架構:在單節點服務中,單體應用的所有模塊都封裝在單個進程運行,通信通過相同堆棧調用完成。這種模式下非常容易導致結構和關系不明確,難以對系統進行更改和重構。就像一個不透明的,粘稠的,脆弱的,僵硬的 Big Ball of Mud!
- 分層架構:在經典的分層架構中,層以相當謹慎的方式使用。即一個層只能知道它下方層的數據。在隨后的實際應用中,更多的方式是一個層可以訪問它下面的任何層。分層架構解決了單體架構的的邏輯分離問題,每一層都可以被等效替換,層區分也更加標准化,同時一個層可以被幾個不同/更高級別的層使用。當然,層也有比較明顯的缺點,層不能封裝掉一切,比如添加到UI的某個字段,可能也需要添加到DB,而且額外多余的層會嚴重損害系統性能。
- MVC 架構:MVC 架構產生的原因其實很簡單,隨着業務系統的復雜性增加,之前所謂“全棧工程師”已經不適用大部分場景。為了降低前端和后台的集成復雜性,故而開始推廣 MVC 架構。其中,Model 代表業務邏輯,View 代表視圖層比如前端UI的某個小組件,Controller 提供 View 和 Model 的協調比如將用戶某項操作轉為業務邏輯等。這里還有很多擴展架構,譬如 Model-View-Presenter ,Model-View-Presenter-ViewModel,Resource-Method-Representation,Action-Domain-Responder 。
- EBI 架構:即 Entity,Boundary(接口),Interactor(控制)。EBI架構將系統邊界視為完整連接,而不僅僅是視圖,控制器或接口。EBI 的實體代表持有數據並結束相關行為的實際實體,很類似阿里雲的 POP API。EBI 主要還是后端概念,他是與 MVC 相輔相成的。
- 洋蔥架構:洋蔥架構是一種低耦合,高內聚的架構模型。所有的應用程序圍繞獨立的對象模型構建,內層定義接口外層實現接口,耦合方向向中心內聚,所有代碼都可以獨立與基礎設施進行編譯和運行。
- SOA 架構:SOA 是 Service Orientated Architure 的縮寫,即面向服務架構。表示每一個功能都是通過一個獨立的服務來提供,服務定義了明確的可調用接口,服務之間的編排調用完成一個完整的業務。其實這個架構也是目前架構中最成熟的,日常使用最多的架構模式。
什么是 EDA 架構
我們聊完之前全部的架構趨勢后,再回過頭看看什么是 EDA 架構。
EDA 事件驅動架構( Event-Driven Architecture ) 是一種系統架構模型,它的核心能力在於能夠發現系統“事件”或重要的業務時刻(例如交易節點、站點訪問等)並實時或接近實時地對相應的事件采取必要行動。這種模式取代了傳統的“ request/response ”模型,在這種傳統架構中,服務必須等待回復才能進入下一個任務。事件驅動架構的流程是由事件提供運行的。
上圖其實很好的解釋了 EDA 架構的模型,但是其實還不夠明確。所以,這里我們和單體架構一起對比看看他們之間差異。
在如上對比圖中,我們其實可以較為清楚看到它與傳統架構的區別。在一般傳統架構中,創建訂單操作發生后,一系列的操作其實都是通過一個系統完成的。而事件驅動的概念則是將全部操作都轉換為 “事件” 概念,下游通過捕獲某個 “事件” 來決定調用什么系統完成什么樣的操作。
總結來看,事件驅動其實是將比較重要的業務時刻封裝成“事件”,並通過某個 EventBus 將事件路由給下游系統。
我們了解了 EDA 架構的整個處理過程,但是還沒解決這個所謂的“EventBUS”到底是啥樣。
上圖就是事件驅動的核心邏輯架構。是不是非常像某個傳統 MQ?別着急,下面我會講到這個架構的復雜部分。講完 EventBus,我們回過頭來看“事件”,剛剛介紹中比較重要部分其實是將操作轉換為某類事件進行分發。那這的事件我們怎么定義呢?
簡單來看,其實事件就是狀態的顯著變化,當用戶采取特定行動時觸發。以 4S 店售賣汽車為例:
- 當客戶購買汽車並且其狀態從 For Sale 變為 Sold 是一個事件。
- 成功交易后,從帳戶中扣除金額是一個事件。
- 單擊預訂試駕后,從將預約信息添加到指定用戶就是一個事件。
每個事件都可能觸發一個或多個選項作為響應。
關於事件其實雲原生 CNCF 基金會在 2018 年托管了開源 CloudEvents 項目,該項目旨在用統一和規范的格式來描述事件,來加強不同的服務、平台以及系統之間的互操作性。在該項目定義下,通用的事件規范是這樣的:
事件主要由 Json 體構成,通過不同字段描述發生的事件。
EDA 架構的落地實踐思考
在開始介紹落地實踐時,我們先來看一個經典的 EDA 架構模型:
這是一個非常經典 EDA 訂單架構,該架構主要使用了 EventBridge 和 FC 函數計算(如果不太熟悉 FaaS 的同學可以把 FC 節點當作 ECS 或 K8s 的某個 POD 節點),通過事件驅動各個業務進行協作。
所以這塊的中心節點(EventBridge)其實有三個比較重要的能力:
- For Event Capturing(事件收集):具備采集事件的能力
- For Routing(事件路由):通過事件內容將事件路由分發至於下游的能力的
- For Event Processing(事件過濾/替換):對事件進行脫敏或初步過濾&篩選的能力
通常情況下,要實現這三個能力是比較困難的,比如:Event Capturing 可能需要熟悉 Dell Boomi, Snaplogic, MuleSoft, Dataflow, Apache Apex 等,Routing 部分可能通過 RocketMQ,RabbitMQ, ActiveMQ, Apache Kafka ,Event Processing 需要了解 Apache Storm, Apache Flink 。所以之前講的邏輯架構其實非常理想,要想實現完成的 EDA 事件驅動還需要包括這些核心能力。
其實,從剛剛的架構中我們也能窺探到一些信息,EDA 架構其實看起來沒有那么簡單,那它有何優劣呢?下面我就簡單羅列下 EDA 架構在實踐中的優勢:
- 松耦合:事件驅動架構是高度松耦合且高度分布式的架構模型,事件的創建者(來源)只知道發生的事件,並不知道事件的處理方式,也關心有多少相關方訂閱該事件。
- 異步執行:EDA 架構是異步場景下最適合的執行工具,我們可以將需要事件保留在隊列中,直到狀態正常后執行。
- 可擴展性:事件驅動架構可以通過路由&過濾能力快速划分服務,提供更便捷的擴展與路由分發。
- 敏捷性:事件驅動架構可以通過將事件分發至任何地方,提供更敏捷高效的部署方案。
當然,劣勢也很明顯:
- 架構復雜:事件驅動架構復雜,路由節點多,系統結成復雜,功能要求多。
- 路由分發難:事件路由及分發難,靈活的事件路由需要依賴強大的實時計算能力,對整體分發系統要求較高。
- 無法追蹤:事件追蹤是整個 EDA 架構保證,EDA 架構中往往很難追蹤到事件處理狀態,需要大量的定制化開發。
- 可靠性差:事件驅動由於需要多系統集成,可靠性通常較差,且交付無法保障。
阿里雲 EventBridge 如何解決 EDA 場景下的困境
針對 EDA 場景下面臨的這些問題,阿里雲推出了 EventBridge,一款無服務器事件總線服務,其使命是作為雲事件的樞紐,以標准化的 CloudEvents 1.0 協議連接雲產品和應用,應用和應用,提供中心化的事件治理和驅動能力,幫助用戶輕松構建松耦合、分布式的事件驅動架構;另外,在阿里雲之外的雲市場上有海量垂直領域的 SaaS 服務,EventBridge 將以出色的跨產品、跨組織以及跨雲的集成與被集成能力,助力客戶打造一個完整的、事件驅動的、高效可控的上雲體驗。並針對 EDA 困境提供了針對性的解決方案。
架構復雜:提供業內通用的 Source ,Buses,Rules,Targets 模塊管理能力,同時支持 EventBus 和 EventStream 兩種模式。大幅度降低事件驅動架構難度。
路由分發:EventBridge 通過事件規則驅動,支持 8 大事件模式,4 重轉換器,滿足路由分發的全部訴求。
無法追蹤:獨家提供事件追蹤能力,事件分析/查詢能力。為用戶完善整體事件鏈路。
可靠性差:支持 DLQ/ 重試機制,大幅度保證由於用戶下游系統導致的事件故障與延遲。
同時,在此基礎上 EventBridge 支持 82 種阿里雲產品,847 種事件類型。
阿里雲 EventBridge 更多場景介紹
- 經典 EDA 事件驅動:事件總線(EventBridge)最重要的能力是通過連接應用程序,雲服務和 Serverless 服務構建 EDA(Event-driven Architectures) 事件驅動架構,驅動應用與應用,應用與雲的連接。
- 流式 ETL 場景:EventBridge 另一個核心能力是為流式的數據管道的責任,提供基礎的過濾和轉換的能力,在不同的數據倉庫之間、數據處理程序之間、數據分析和處理系統之間進行數據同步/跨地域備份等場景,連接不同的系統與不同服務。
- 統一事件通知服務:EventBridge 提供豐富的雲產品事件源與事件的全生命周期管理工具,您可以通過總線直接監聽雲產品產生的數據,並上報至監控,通知等下游服務。
目前事件總線免費公測,點擊下方鏈接,立即體驗!
https://www.aliyun.com/product/aliware/eventbridge?spm=5176.19720258.J_8058803260.46.70c22c4aFzf3Pq
加入釘群(群號:31481771),及時了解產品最新動態!