原文:MQ消息堆积

作者:jsbintask来源:简书链接:https: www.jianshu.com p f b a 面试题剖析 你看这问法,其实本质针对的场景,都是说,可能你的消费端出了问题,不消费了 或者消费的速度极其慢。接着就坑爹了,可能你的消息队列集群的磁盘都快写满了,都没人消费,这个时候怎么办 或者是这整个就积压了几个小时,你这个时候怎么办 或者是你积压的时间太长了,导致比如 RabbitMQ 设置了 ...

2019-12-17 10:57 0 1036 推荐指数:

查看详情

mq消息堆积处理

1.大量消息mq里积压 场景:几千万条数据在MQ里积压了七八个小时,从下午4点多,积压到了晚上很晚,10点多,11点多。线上故障了,这个时候要不然就是修复consumer的问题,让他恢复消费速度,然后傻傻的等待几个小时消费完毕。这个肯定不行。一个消费者一秒是1000条,一秒3个消费者是3000 ...

Sat Feb 01 04:50:00 CST 2020 0 4601
mq消息堆积处理

1.大量消息mq里积压 场景:几千万条数据在MQ里积压了七八个小时,从下午4点多,积压到了晚上很晚,10点多,11点多。线上故障了,这个时候要不然就是修复consumer的问题,让他恢复消费速度,然后傻傻的等待几个小时消费完毕。这个肯定不行。一个消费者一秒是1000条,一秒3个消费者是3000 ...

Tue Mar 15 02:25:00 CST 2022 0 653
MQ怎么解决消息堆积的问题

MQ怎么解决消息堆积的问题 网上普通回答 修复consumer的问题,确保其恢复消费速度,然后将现有consumer都停止 临时建立好原先10倍或者20倍的queue数量 然后写一个临时的分发数据的consumer程序,这个程序部署上去消费积压的数据,消费 ...

Sun Dec 20 00:34:00 CST 2020 0 644
MQ系列13:消息大量堆积如何为解决

MQ系列1:消息中间件执行原理 MQ系列2:消息中间件的技术选型 MQ系列3:RocketMQ 架构分析 MQ系列4:NameServer 原理解析 MQ系列5:RocketMQ消息的发送模式 MQ系列6:消息的消费 MQ系列7:消息通信,追求极致性能 MQ系列8:数据存储,消息队列的高可用保障 ...

Fri Jun 09 23:28:00 CST 2023 0 787
RocketMQ消息堆积问题

RocketMQ消息堆积问题 RocketMQ消息堆积主要分为三个层次的问题: 其一是Producer生产速率过快,什么场景呢,比如Producer故障,比如DOS攻击,比如业务高峰(超过企业预估的,例如12306订票,双十一下单,这些一开始的时候都有超过预期的情况)。 其二是Broker消息 ...

Fri Jul 09 20:11:00 CST 2021 0 335
rocketMQ的消息堆积如何处理

下游消费系统如果宕机了,导致几百万条消息消息中间件里积压,此时怎么处理?你们线上是否遇到过消息积压的生产故障?如果没遇到过,你考虑一下如何应对?首先要找到是什么原因导致的消息堆积,是Producer太多了,Consumer太少了导致的还是说其他情况,总之先定位问题。然后看下消息消费速度是否正常 ...

Fri Jun 04 04:22:00 CST 2021 0 10880
rocketMQ处理消息堆积

首先要找到原因,是producer太多了,还是说consumer太少了。定位问题,然后看下消息的消费速度是否正常,正常的话,可以通过临时上线更多consumer解决问题。 如果consumer和queue不对等,上线了多台consumer也无法解决的话,可以 准备一个临时 ...

Wed Dec 08 05:38:00 CST 2021 0 909
RabbitMQ消息堆积问题?

原因: 有时可能因为消费者自身代码问题,导致没办法正常消费消息,那么就会导致消息队列中会堆积大量的消息; 或因为同一时间来了非常多的消息,消费者没办法及时消费,导致消息队列中堆积了大量消息。 解决办法: 1.去优化消费者代码,提高消费能力。减少消费时间 2. ...

Mon Mar 08 08:00:00 CST 2021 0 617
 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM