原文:消息队列满了以后该怎么处理?有几百万消息持续积压几小时,说说怎么解决

原文地址:https: www.jianshu.com p b cc a b rabbitmq的shovel功能 很多时候线上rabbitmq的队列会出现消息堆积,消息堆积的时候可以通过后期优化代码逻辑或者增加消费者的实例数去解决。 但是后期的代码优化在面临紧急情况时总归是 远水解不了近渴 ,并且有些业务场景也井非可以简单地通过增加消费实例而得以增强消费能力。 在一筹莫展之时,不如试一下 Shov ...

2020-11-09 11:18 0 845 推荐指数:

查看详情

如何解决消息队列的延时以及过期失效问题?消息队列满了以后该怎么处理?有几百万消息持续积压几小时说说怎么解决

1、面试官心里分析 你看这问法,其实本质针对的场景,都是说,可能你的消费端出了问题,不消费了,或者消费的极其极其慢。接着就坑爹了,可能你的消息队列集群的磁盘都快写满了,都没人消费,这个时候怎么办?或者是整个这就积压了几个小时,你这个时候怎么办?或者是你积压的时间太长了,导致比如rabbitmq ...

Sat Mar 09 06:47:00 CST 2019 0 532
消息持续积压几小时怎么办

大量消息在mq里积压了几个小时了还没解决   几千万条数据在MQ里积压了七八个小时,最简单的方法可以让他恢复消费速度,然后等待几个小时消费完毕。   一个消费者一秒是1000条,一秒3个消费者是3000条,一分钟是18万条,1000多万条 ,所以如果你积压几百万到上 ...

Tue Nov 27 18:57:00 CST 2018 1 2050
消息队列如何解决消息积压问题

转载:消息队列消息积压了怎么办? 作者: 以梦为码   Q:刚开始是对这个疑问抱有质疑态度的,因为使用消息队列的其中目的就是削峰填谷,来避免高流量时,对下游服务的冲击,所以使用消息队列进行缓冲,下游根据自己的消费能力去消费, 我感觉这就是消息积压本就是使用消息队列的功能,怎么会是问题 ...

Fri Jun 05 08:25:00 CST 2020 0 1720
如何解决消息队列的过期失效,消息队列积压问题

大量消息在 mq 里积压了几个小时了还没解决 几千万条数据在 MQ 里积压了七八个小时,从下午 4 点多,积压到了晚上 11 点多。这个是我们真实遇到过的一个场景,确实是线上故障了,这个时候要不然就是修复 consumer 的问题,让它恢复消费速度,然后傻傻的等待几个小时消费完毕。这个肯定不能在 ...

Sat May 25 20:55:00 CST 2019 0 682
消息队列消息积压了怎么办?

     Q:刚开始是对这个疑问抱有质疑态度的,因为使用消息队列的其中目的就是削峰填谷,来避免高流量时,对下游服务的冲击,所以使用消息队列进行缓冲,下游根据自己的消费能力去消费, 我感觉这就是消息积压本就是使用消息队列的功能,怎么会是问题呢?   A:首先消息积压是正常现象,但凡是过多 ...

Sun Feb 09 04:16:00 CST 2020 0 2130
系统学习消息队列分享(八) 消息积压了该如何处理?

据我了解,在使用消息队列遇到的问题中,消息积压这个问题,应该是最常遇到的问题了,并且,这个问题 还不太好解决。 我们都知道,消息积压的直接原因,一定是系统中的某个部分出现了性能问题,来不及处理上游发送的消 息,才会导致消息积压 ...

Sun Sep 01 00:28:00 CST 2019 0 542
如何处理消息积压

除了消息的丢失,另一个消息队列常见的问题就是消息积压了。我们都知道,消息之所以会挤压是由于消费端的性能除了问题,导致消息的消费速度较低来不及处理上游发送的消息。这一章我们就来看一下,如果优化代码的性能,避免出现消息积压。 在使用消息队列的系统中,对于性能的优化,主要体现在 ...

Mon Oct 14 05:14:00 CST 2019 0 360
 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM