原文:MQ隊列堆積太長,消費不過來怎么辦(轉)

轉自:http: windwrite.com archives 我們現有的業務就面臨此問題,消息生產太快,消費不過來,導致隊列堆積很長,把服務器內存耗盡,這時RabbitMQ的處理能力很低下。 我在RabbitMQ社區發郵件問了下: We have the queue publisher and subscriber, the subscriber is going with multi thre ...

2014-09-17 14:26 1 5125 推薦指數:

查看詳情

消費端如何保證消息隊列MQ的有序消費

消息無序產生的原因 消息隊列,既然是隊列就能保證消息在進入隊列,以及出隊列的時候保證消息的有序性,顯然這是在消息的生產端(Producer),但是往往在生產環境中有多個消息的消費端(Consumer),盡管消費端在拉取消息時是有序的,但各個消息由於網絡等方面原因無法保證在各個消費端中處理時有 ...

Tue Jul 30 08:15:00 CST 2019 0 2573
mq消息堆積處理

1.大量消息在mq里積壓 場景:幾千萬條數據在MQ里積壓了七八個小時,從下午4點多,積壓到了晚上很晚,10點多,11點多。線上故障了,這個時候要不然就是修復consumer的問題,讓他恢復消費速度,然后傻傻的等待幾個小時消費完畢。這個肯定不行。一個消費者一秒是1000條,一秒3個消費者是3000 ...

Sat Feb 01 04:50:00 CST 2020 0 4601
MQ消息堆積

作者:jsbintask 來源:簡書鏈接:https://www.jianshu.com/p/5f4b3a520719 面試題剖析 你看這問法,其實本質針對的場景,都是說,可能你的消費端出了問題,不消費了;或者消費的速度極其慢。接着就坑爹了,可能你的消息隊列集群的磁盤 ...

Tue Dec 17 18:57:00 CST 2019 0 1036
mq消息堆積處理

1.大量消息在mq里積壓 場景:幾千萬條數據在MQ里積壓了七八個小時,從下午4點多,積壓到了晚上很晚,10點多,11點多。線上故障了,這個時候要不然就是修復consumer的問題,讓他恢復消費速度,然后傻傻的等待幾個小時消費完畢。這個肯定不行。一個消費者一秒是1000條,一秒3個消費者是3000 ...

Tue Mar 15 02:25:00 CST 2022 0 653
關於MQ的幾件小事(六)消息積壓在消息隊列里怎么

1.大量消息在mq里積壓了幾個小時了還沒解決 場景:幾千萬條數據在MQ里積壓了七八個小時,從下午4點多,積壓到了晚上很晚,10點多,11點多。線上故障了,這個時候要不然就是修復consumer的問題,讓他恢復消費速度,然后傻傻的等待幾個小時消費完畢。這個肯定不行。一個消費者一秒是1000條,一秒 ...

Thu May 23 05:57:00 CST 2019 0 4875
MQ怎么解決消息堆積的問題

MQ怎么解決消息堆積的問題 網上普通回答 修復consumer的問題,確保其恢復消費速度,然后將現有consumer都停止 臨時建立好原先10倍或者20倍的queue數量 然后寫一個臨時的分發數據的consumer程序,這個程序部署上去消費積壓的數據,消費 ...

Sun Dec 20 00:34:00 CST 2020 0 644
 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM