不同broker之間的關系 　　Kafka使用zookeeper來維護集群成員的信息。每個broker都有一個唯一標識符，這個標識符可以在配置文件中指定，也可以自動生成。在broker啟動時，它通過建立臨時節點把自己的ID注冊到zookeeper。kafka組件訂閱broker ...

在server.properties文件中配置： 1、broker.id kafka集群是由多個節點組成的，每個節點稱為一個broker，中文翻譯是代理。每個broker都有一個不同的brokerId，由broker.id指定，是一個不小於0的整數，各brokerId必須不同，但不必連續 ...

常規配置 常規配置指的是一些在使用單機安裝時可以直接使用的默認值，這可以滿足大部分的開發需求。但是在部署到其他環境時，需要格外小心，這些參數是單個服務器最基本的配置，他們中的大部分需要經過修改之后才可以用在生產環境里 broker.id 每個broker都需要有一個標識符，使用 ...

背景：因為公司收集終端盒子數據的kafka服務偶爾會倒，所以考慮使用kafka的分布式，增加broker節點，來提高系統的可用性。當然，zookeeper服務節點也是可以增加的，但不在本文范圍內。 具體步驟如下： 1. 新加kafka服務，並啟動 如果是同一服務器，則可以拷貝新建 ...

　　Kafka發行包里自帶的配置樣本可以用來安裝單機服務，但並不能滿足大多數安裝場景的要求。kafka有很多配置選項，Kafka有很多配置選項，涉及安裝和調優的方方面面。不過大多數調優選項可以使用默認配置，除非你對調優有特別的要求。 常規配置和主題配置（服務端的配置文件） 　　kafka安裝包 ...

Kafka自0.9.0.0版本引入了配額管理(quota management)，旨在broker端對clients發送請求進行限流(throttling)。目前Kafka支持兩大類配額管理： 網絡帶寬（network bandwidth）配額管理：定義帶寬閾值來限制請求發送速率，閾值單位 ...

　　之前寫過一篇關於Kafka High watermark的文章，引起的討論不少：有贊揚之聲，但更多的是針對文中的內容被challenge，於是下定決心找個晚上熬夜再看了一遍，昨晚挑燈通讀了一遍確實發現不少錯誤。鑒於此我決定再寫一篇博客重新梳理一下最新版本中High watermark（下稱HW ...

/yahoo/kafka-manager。 這款監控框架的好處在於監控內容相對豐富，既能夠實現broker級常 ...