介紹 延遲隊列，顧名思義它是一種帶有延遲功能的消息隊列。 那么，是在什么場景下我才需要這樣的隊列呢？ 很多時候我們會有延時處理一個任務的需求，比如說： 2個小時后給用戶發送短信。15分鍾后關閉網絡連接。2分鍾后再次嘗試回調。 下面我們來分別探討一下幾種實現方案： 1、Java中 ...

核心概念 broker是kafka的節點，多台broker集群就是kafka topic消息分為多個topic partition分區，topic划分了多個partition分區，存在負載均衡策略 每個分區由一個個消息構成，消息在分區中被標識了遞增的序號（表明了消息 ...

一、消息隊列概述 消息隊列中間件是分布式系統中重要的組件，主要解決應用耦合，異步消息，流量削鋒等問題。實現高性能，高可用，可伸縮和最終一致性架構。是大型分布式系統不可缺少的中間件。 目前在生產環境，使用較多的消息隊列有ActiveMQ，RabbitMQ，ZeroMQ，Kafka，MetaMQ ...

　　在我們的工作中，很多地方使用延遲隊列，比如訂單到期沒有付款取消訂單，制訂一個提醒的任務等都需要延遲隊列，那么我們需要實現延遲隊列。我們本文的梗概如下，同學們可以選擇性閱讀。 　　1. 實現一個簡單的延遲隊列。 　　2.使用Redis的list實現分布式延遲隊列。 　　3.使用Redis ...

消息隊列實現分布式事務 前陣子從支付寶轉賬1萬塊錢到余額寶，這是日常生活的一件普通小事，但作為互聯網研發人員的職業病，我就思考支付寶扣除1萬之后，如果系統掛掉怎么辦，這時余額寶賬戶並沒有增加1萬，數據就會出現不一致狀況了。 上述場景在各個類型的系統中都能找到相似影子，比如在電商系統中，當有用 ...

Pulsar簡介 Apache Pulsar是一個企業級的分布式消息系統，最初由Yahoo開發並在2016年開源，目前正在Apache基金會下孵化。Plusar已經在Yahoo的生產環境使用了三年多，主要服務於Mail、Finance、Sports、 Flickr、 the Gemini Ads ...

基本架構 Kafka分布式消息隊列的作用： 解耦：將消息生產階段和處理階段拆分開，兩個階段互相獨立各自實現自己的處理邏輯，通過Kafka提供的消息寫入和消費接口實現對消息的連接處理。降低開發復雜度，提高系統穩定性。 高吞吐率：kafka通過順序讀寫磁盤提供可以和內存隨機讀寫相匹敵的讀寫速度 ...

前言 我們可以將原本耦合、同步執行的程序 解耦成 生產端+ 消息隊列+消費端模型的異步程序，加上分布式的生產者和消費者架構就可以在一定程度上支撐大並發。 NSQ是go語言開發的消息隊列，所以對nsqd進行水平擴展時它的部署、配置也會相對簡單。 如果熟悉golang的話在遇到了十分棘手的問題時 ...