從16年4月5號開始學習kafka，后來由於項目需要又涉及到了storm。 經過幾天的掃盲，到今天16年4月13日，磕磕碰碰的總算是寫了一個kafka+storm的HelloWorld的例子。 為了達到前人栽樹后人乘涼的知識共享的目的，我嘗試着梳理一下過程。 ====實例需求 ...

一、初始化項目 新建一個文件夾，使用truffle init進行初始化，有時候會連接不上，多試幾次就好了。 將文件夾使用ftp下載到本地，文件目錄如下： 文件目錄解釋 ...

1、Kafka 版本說明 從上面截圖已經很清楚的看到，針對版本 kafka_2.12-2.6.0.tgz ，2.12是編譯Kafka Server端的Scala版本，2.6.0是Kafka Server的版本！ 另外，目前Kafka客戶端從某個版本開始已經用Java重寫 ...

轉：https://yq.aliyun.com/articles/657849 技術原理 Kafka是由Apache軟件基金會開發的一個開源流處理平台，由Scala和Java編寫。Kafka為處理實時數據提供一個統一、高吞吐、低延遲的平台。其持久化層本質上是一個“按照分布式事務日志架構的大規模 ...

環境：騰訊雲centos7 1、下載 2、解壓 3、啟動與測試 4、安裝kafka web界面 　　a)下載地址：https://github.com/quantifind/KafkaOffsetMonitor/releases/download ...

一、准備 1、啟動zookeeper 2、啟動kafka 3、kafka創建主題。主題名稱為：couponTopic ./kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor ...

一、硬件考量 1.1、內存 不建議為kafka分配超過5g的heap，因為會消耗28-30g的文件系統緩存，而是考慮為kafka的讀寫預留充足的buffer。Buffer大小的快速計算方法是平均磁盤寫入數量的30倍。推薦使用64GB及以上內存的服務器，低於32GB內存的機器可能會適得其反 ...

一、Kafka設計原理參考： http://blog.csdn.net/suifeng3051/article/details/48053965?locationNum=2 http://www.cnblogs.com/metoy/p/4452124.html 二、常見問題 ...