今天給大家分享一個微軟官方的好東西:Channel。
前言
今天給大家分享一個微軟官方的生產者/消費者方案的特性解決:Channel。
Channel在System.Threading.Channels
命名空間下,Core 2.1使用時,需要從Nuget上安裝。
% dotnet add package System.Threading.Channels
而在Core 3.0 preview 7開始,就直接包含在框架中了。
這是一個相對較新的特性。從Core 2.1開始加入,現在版本是5.0.0(嗯,這個版本號有點騙人,Channel的第一個版本就是4.5.0)。
Channel能做什么?
邏輯上,Channel實際就是一個高效的、線程安全的隊列,支持在生產者和消費者之間傳遞數據。
利用Channel,通過發布和訂閱,可以將生產者和消費者分開。生產者Producer負責接收請求,並寫入Channel,而消費者Consumer為每個進入Channel的數據執行處理。這樣做,一方面可以使生產者和消費者並行工作來提高性能,另一方面,可以通過創建更多的生產者或消費者來提高應用的吞吐量。
為防止非授權轉發,這兒給出本文的原文鏈接:https://www.cnblogs.com/tiger-wang/p/14068973.html
下面,我們以一個實際例子,來解釋這個特性。
創建Channel
Channel提供了一個靜態Channel類,提供了兩個公開方法來創建兩種類型的Channel。
-
CreateUnbounded - 創建一個具有無限容量的Channel。
-
CreateBounded - 創建一個具有有限容量的Channel。
人通常來說,這兩種方式使用上沒有太大的區別。實際應用中,具體要看生產和消費的速度,以及期望產生的結果。有限容量的Channel,容量是有上限的,到達上限后,可以讓生產者非阻塞等待消費者使用並釋放Channel容量后再繼續。這種方式,好處是可以控制生產的速度,控制系統資源的使用,缺點也是。因為控制速度意味着生產速度會被限制,甚至停止。而無限容量,生產者可以全速進行生產。但也有缺點,如果消費者的消費速度低於生產者,Channel的資源使用會無限增加,會有服務器資源耗盡的可能。
今天的例子,我們使用無限Channel。
var channel = Channel.CreateUnbounded<string>();
非常簡單的一行代碼,就創建了一個無限容量的Channel。
我們定義這個Channel用來保存字符串對象。
創建方法是一個通用的工廠方法,所以我們可以為需要使用的任何類型的對象和數據創建Channel。
Channel有兩個屬性:閱讀器返回ChannelReader,寫入器返回ChannelWriter。
寫入Channel
使用寫入器ChannelWriter,可以對Channel進行寫入操作。ChannelWriter提供了以下幾個方法:
- WriteAsync - 異步寫入
- WaitToWriteAsync - 非阻塞等待,直到有空間可寫入時或Channel關閉時,返回true/false
- TryWrite - 嘗試寫入
- Complete - 標記Channel為關閉,並不再寫入數據到該Channel
- TryComplete - 嘗試標記Channel為關閉。
這幾個方法很容易理解,就不解釋了。
在本文的例子里,我用了:
await channel.Writer.WriteAsync("New message");
讀取Channel
使用閱讀器ChannelReader從Channel進行數據的讀取。也提供了幾個方法:
- ReadAsync - 異步讀取
- ReadAllAsync - 異步讀取Channel中的所有數據
- TryRead - 嘗試讀取
- WaitToReadAsync - 非阻塞等待,直到有數據可讀取或Channel關閉時,返回true/false
不同的消費者模式,會用到不同的讀取方法。這個根據經驗來寫就好。
本文的例子中,我是采用WaitToReadAsync和ReadAsync配合來使用的:
while (await ChannelReader.WaitToReadAsync())
{
if (ChannelReader.TryRead(out var timeString))
{
/***/
}
}
WaitToReadAsync是一個非阻塞等待,在有消息可讀或Channel關閉時,才會喚醒並繼續。
考慮到有多個消費者的情況,有可能別的線程已經進行了讀取,這兒使用TryRead進行讀取操作。
要注意:數據的同步工作是由Channel進行管理的。Channel會確保多個消費者不會讀到相同的數據。Channel同時也管理數據的次序。
示例代碼
今天的示例代碼我放到了Github上。鏈接是文章最后。
這個例子中,我做了三個場景。
首先是Channel。我使用了無限Channel。然后是創建生產者和消費者。數據傳輸過程就簡單化了,生產者只簡單將一個字符串寫入到Channel。消費者也是,簡單等待並從Channel讀取數據字符串,寫入控制台。
三個場景分別是:
單一生產者/單一消費者
這個例子中,創建了一個生產者和一個消費者。兩者的任務都是並發啟動的。
里面的延時,是用來模擬工作負載的。
多個生產者/單一消費者
這個例子中有兩個生產者。通常在應用中有多個生產者時,我們需要確保生產與單個消費者所能處理的消息數量大致相當,這樣能更好地利用服務器資源。
單一生產者/多個消費者
這個其實是應用中最常見的情況,就是產生消息很快,但處理工作相關較慢,而且工作也更密集。這種情況,實際應用中我們可以通過擴大消費者數量來滿足生產的需求。
總結
最近的項目在做一個大數據的采集,用到了一些Channel的技術。然后發現網上這部分內容很少,就做了個例子,寫了這個文章。
Channel內容本身並不多,但用着很方便,而且實際應用中,比想像的更強大。它可以簡化很多生產者/消費者模式的使用,而且,任務間交換數據,使用Channel會更方便,更直接。
示例代碼在:https://github.com/humornif/Demo-Code/tree/master/0033/demo
![]() |
微信公眾號:老王Plus 掃描二維碼,關注個人公眾號,可以第一時間得到最新的個人文章和內容推送 本文版權歸作者所有,轉載請保留此聲明和原文鏈接 |