Q:刚开始是对这个疑问抱有质疑态度的,因为使用消息队列的其中目的就是削峰填谷,来避免高流量时,对下游服务的冲击,所以使用消息队列进行缓冲,下游根据自己的消费能力去消费, 我感觉这就是消息积压本就是使用消息队列的功能,怎么会是问题呢? A:首先消息积压是正常现象,但凡是过多 ...
面试题 如何保证消息的可靠性传输 如何处理消息丢失的问题 面试官心里分析 这个是肯定的,用mq有个基本原则,就是数据不能多一条,也不能少一条,不能多,就是刚才说的重复消费和幂等性问题。不能少,就是说这数据别搞丢了。那这个问题你必须得考虑一下。 如果说你这个是用mq来传递非常核心的消息,比如说计费,扣费的一些消息,因为我以前设计和研发过一个公司非常核心的广告平台,计费系统,计费系统是很重的一个业务 ...
2019-03-27 11:03 0 1509 推荐指数:
Q:刚开始是对这个疑问抱有质疑态度的,因为使用消息队列的其中目的就是削峰填谷,来避免高流量时,对下游服务的冲击,所以使用消息队列进行缓冲,下游根据自己的消费能力去消费, 我感觉这就是消息积压本就是使用消息队列的功能,怎么会是问题呢? A:首先消息积压是正常现象,但凡是过多 ...
一、RabbitMQ 1)生产者弄丢了数据 生产者将数据发送到rabbitmq的时候,可能因为网络问题导致数据就在半路给搞丢了。 1.可以选择用rabbitmq提供的事务功能,在生产者发送数据之前开启rabbitmq事务(channel.txSelect),然后发送 ...
消息队列防止消息不丢失 1、 生产者发送消息到broker失败;生产者使用事务消息。 2、 Broker集群主从同步失败;两阶段提交,多数节点成功后提交。 3、 MQ异步刷盘,可能会消息丢失;改为同步刷盘。 4、 Broker发送消息到消费者失败;消费者ack机制。 5、 MQ集群 ...
消息队列 - 关于消息队列的消息丢失问题的一点思考 使用消息中间件必须面对的两大问题 - 消息丢失 和 消息重复。 消息丢失的解决办法主要是通过消息重发的补偿手段,消息重发后导致消息重复,消息重复需要使用幂等解决。 消息从生产到消费,一般需要 ...
一、RabbitMQ 1)生产者弄丢了数据 生产者将数据发送到rabbitmq的时候,可能因为网络问题导致数据就在半路给搞丢了。 1.可以选择用rabbitmq提供的事务功能,在生产者发送数据之前开启rabbitmq事务(channel.txSelect),然后发送消息,如果消息 ...
使用消息队列,绕不开的一个问题就是如何保证消息不丢失,现在主流的消息中间件都提供了完整的消息可靠性保证机制,可以确保消息的可靠传递,本文以rocketMq为例介绍如何保证消息不丢失,其他消息队列类似。原文地址 消息传递过程 基本上所有的消息都划分为三个阶段生产、存储、消费,如下图 ...
原文链接:https://juejin.im/post/6844904078862974984 前言 消息队列在互联网技术存储方面使用如此广泛,几乎所有的后端技术面试官都要在消息队列的使用和原理方面对小伙伴们进行360°的刁难。 面试官杠上消息队列?高可用、重复消费、丢失、顺序消息 ...
如何保证消息队列的高可用和幂等性以及数据丢失,顺序一致性 <!-- more --> RabbitMQ的高可用性 RabbitMQ是比较有代表性的,因为是基于主从做高可用性的,我们就以他为例子讲解第一种MQ的高可用性怎么实现。 rabbitmq有三种模式: 单机模式 ...