rocketMq和kafka的性能對比和原理，Kafka vs RocketMQ Topic數量對單機性能的影響 阿里巴巴中間件團隊對rocketMq，kafka和rabbitMq的發送消息性能的測試，在單機同步發送的場景下，Kafka>RocketMQ>RabbitMQ。如下圖 ...

引言 上一期我們對比了三類消息產品(Kafka、RabbitMQ、RocketMQ)單純發送小消息的性能，受到了程序猿們的廣泛關注，其中大家對這種單純的發送場景感到並不過癮，因為沒有任何一個網站的業務只有發送消息。本期，我們就來模擬一個真實的場景： 消息的發送和訂閱一定是共存 ...

版本選型 spark 1.5.2 + kafka 0.9.0.1 + Elasticsearch 2.2.1 安裝部署 1. 安裝腳本及文件 密碼 4m7l 安裝腳本和服務都是單機簡化版，沒有保護機制。有興趣的朋友可以一起寫一個集群的安裝腳本和服務 http ...

手動： 刪除kafka存儲目錄（server.properties文件log.dirs配置，默認為"/tmp/kafka-logs"）相關topic目錄 刪除zookeeper "/brokers/topics/"目錄下相關topic節點 命令+手動 ...

概述 　　在平時對kafka的運維工作中，我們經常會由於某些原因去刪除一個topic，比如這個topic是測試用的，生產環境中需要刪除。或者我想擴容topic的同時，這個topic中的數據我不想要了，這時候刪除topic，增加broker，再重新創建topic就會是比較簡單的方法。但是kafka ...

執行 windows 腳本 命令行程序，獲取 broker 元數據，計算副本分配方案，然后把 topic 的信息寫入 zk KafkaController 監聽 zk 節點的變化，並產生 TopicChange 事件 ...

一、概述 生產環境中，有一個topic的數據量非常大。這些數據不是非常重要，需要定期清理。 要求：默認保持24小時，某些topic 需要保留2小時或者6小時 二、清除方式 主要有3個： 1. 基於時間 2. 基於日志大小 3. 基於日志起始偏移量 詳情，請參考鏈接 ...

------------恢復內容開始------------ 最近測試環境的kafkaTopic太多太亂，大部分測試用的topic已經沒有用了，就想着刪掉。查閱了網上博客資料之后進行了操作。 1.有說在kafka的server配置文件中加上delete.topic.enable=true ...