原文:面試題:如何保證消息不丟失?處理重復消息?消息有序性?消息堆積處理?

如何保證消息不丟失 就我們市面上常見的消息隊列而言,只要配置得當,我們的消息就不會丟。 先來看看這個圖, 可以看到一共有三個階段,分別是生產消息 存儲消息和消費消息。我們從這三個階段分別入手來看看如何確保消息不會丟失。 生產消息 生產者發送消息至Broker,需要處理Broker的響應,不論是同步還是異步發送消息,同步和異步回調都需要做好try catch,妥善的處理響應,如果Broker返回寫入 ...

2020-07-23 15:34 0 573 推薦指數:

查看詳情

如何處理RabbitMQ 消息堆積消息丟失問題

消息堆積  為什么會產生消息堆積?     大多數是因為Consumer 出問題了,沒有及時發現,或者故障恢復需要較長時間,導致大量消息積壓在消息隊列中。 消息隊列堆積會造成什么后果? 消息被丟棄 磁盤滿了 海量消息需要處理  解決方案: 增加消費者 ...

Sat Jul 17 19:18:00 CST 2021 0 572
消息隊列如何確保消息有序性

要想實現消息有序,需要從 Producer 和 Consumer 兩方面來考慮。 首先,Producer 生產消息的時候就必須要有序。 然后,Consumer 消費的時候,也要按順序來,不能亂。 Producer 有序 像 RabbitMQ 這類普通的消息系統,隊列結構簡單 ...

Sat May 15 17:34:00 CST 2021 0 239
你知道 Kafka 是如何做到消息有序性

kafka 中的每個 partition 中的消息在寫入時都是有序的,而且單獨一個 partition 只能由一個消費者去消費,可以在里面保證消息的順序。但是分區之間的消息是不保證有序的。 ...

Wed May 27 13:33:00 CST 2020 1 1204
rocketMQ的消息堆積如何處理

下游消費系統如果宕機了,導致幾百萬條消息消息中間件里積壓,此時怎么處理?你們線上是否遇到過消息積壓的生產故障?如果沒遇到過,你考慮一下如何應對?首先要找到是什么原因導致的消息堆積,是Producer太多了,Consumer太少了導致的還是說其他情況,總之先定位問題。然后看下消息消費速度是否正常 ...

Fri Jun 04 04:22:00 CST 2021 0 10880
rocketMQ處理消息堆積

首先要找到原因,是producer太多了,還是說consumer太少了。定位問題,然后看下消息的消費速度是否正常,正常的話,可以通過臨時上線更多consumer解決問題。 如果consumer和queue不對等,上線了多台consumer也無法解決的話,可以 准備一個臨時 ...

Wed Dec 08 05:38:00 CST 2021 0 909
mq消息堆積處理

1.大量消息在mq里積壓 場景:幾千萬條數據在MQ里積壓了七八個小時,從下午4點多,積壓到了晚上很晚,10點多,11點多。線上故障了,這個時候要不然就是修復consumer的問題,讓他恢復消費速度,然后傻傻的等待幾個小時消費完畢。這個肯定不行。一個消費者一秒是1000條,一秒3個消費者是3000 ...

Sat Feb 01 04:50:00 CST 2020 0 4601
 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM