原文:消息隊列滿了以后該怎么處理?有幾百萬消息持續積壓幾小時,說說怎么解決

原文地址:https: www.jianshu.com p b cc a b rabbitmq的shovel功能 很多時候線上rabbitmq的隊列會出現消息堆積,消息堆積的時候可以通過后期優化代碼邏輯或者增加消費者的實例數去解決。 但是后期的代碼優化在面臨緊急情況時總歸是 遠水解不了近渴 ,並且有些業務場景也井非可以簡單地通過增加消費實例而得以增強消費能力。 在一籌莫展之時,不如試一下 Shov ...

2020-11-09 11:18 0 845 推薦指數:

查看詳情

如何解決消息隊列的延時以及過期失效問題?消息隊列滿了以后該怎么處理?有幾百萬消息持續積壓幾小時說說怎么解決

1、面試官心里分析 你看這問法,其實本質針對的場景,都是說,可能你的消費端出了問題,不消費了,或者消費的極其極其慢。接着就坑爹了,可能你的消息隊列集群的磁盤都快寫滿了,都沒人消費,這個時候怎么辦?或者是整個這就積壓了幾個小時,你這個時候怎么辦?或者是你積壓的時間太長了,導致比如rabbitmq ...

Sat Mar 09 06:47:00 CST 2019 0 532
消息持續積壓幾小時怎么辦

大量消息在mq里積壓了幾個小時了還沒解決   幾千萬條數據在MQ里積壓了七八個小時,最簡單的方法可以讓他恢復消費速度,然后等待幾個小時消費完畢。   一個消費者一秒是1000條,一秒3個消費者是3000條,一分鍾是18萬條,1000多萬條 ,所以如果你積壓幾百萬到上 ...

Tue Nov 27 18:57:00 CST 2018 1 2050
消息隊列如何解決消息積壓問題

轉載:消息隊列消息積壓了怎么辦? 作者: 以夢為碼   Q:剛開始是對這個疑問抱有質疑態度的,因為使用消息隊列的其中目的就是削峰填谷,來避免高流量時,對下游服務的沖擊,所以使用消息隊列進行緩沖,下游根據自己的消費能力去消費, 我感覺這就是消息積壓本就是使用消息隊列的功能,怎么會是問題 ...

Fri Jun 05 08:25:00 CST 2020 0 1720
如何解決消息隊列的過期失效,消息隊列積壓問題

大量消息在 mq 里積壓了幾個小時了還沒解決 幾千萬條數據在 MQ 里積壓了七八個小時,從下午 4 點多,積壓到了晚上 11 點多。這個是我們真實遇到過的一個場景,確實是線上故障了,這個時候要不然就是修復 consumer 的問題,讓它恢復消費速度,然后傻傻的等待幾個小時消費完畢。這個肯定不能在 ...

Sat May 25 20:55:00 CST 2019 0 682
消息隊列消息積壓了怎么辦?

     Q:剛開始是對這個疑問抱有質疑態度的,因為使用消息隊列的其中目的就是削峰填谷,來避免高流量時,對下游服務的沖擊,所以使用消息隊列進行緩沖,下游根據自己的消費能力去消費, 我感覺這就是消息積壓本就是使用消息隊列的功能,怎么會是問題呢?   A:首先消息積壓是正常現象,但凡是過多 ...

Sun Feb 09 04:16:00 CST 2020 0 2130
系統學習消息隊列分享(八) 消息積壓了該如何處理?

據我了解,在使用消息隊列遇到的問題中,消息積壓這個問題,應該是最常遇到的問題了,並且,這個問題 還不太好解決。 我們都知道,消息積壓的直接原因,一定是系統中的某個部分出現了性能問題,來不及處理上游發送的消 息,才會導致消息積壓 ...

Sun Sep 01 00:28:00 CST 2019 0 542
如何處理消息積壓

除了消息的丟失,另一個消息隊列常見的問題就是消息積壓了。我們都知道,消息之所以會擠壓是由於消費端的性能除了問題,導致消息的消費速度較低來不及處理上游發送的消息。這一章我們就來看一下,如果優化代碼的性能,避免出現消息積壓。 在使用消息隊列的系統中,對於性能的優化,主要體現在 ...

Mon Oct 14 05:14:00 CST 2019 0 360
 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM