【原】Storm及特點
Storm入門教程 1. Storm基礎 Storm Storm主要特點 Storm基本概念 Storm調度器 Storm配置 Guaranteeing Message Processing（消息處理保障機制） Daemon Fault Tolerance（守護線程容錯 ...
原文：【原】storm源碼之storm代碼結構【譯】
說明：本文翻譯自Storm在GitHub上的官方Wiki中提供的Storm代碼結構描述一節Structure of the codebase，希望對正在基於Storm進行源碼級學習和研究的朋友有所幫助。 Storm的源碼共分為三個不同的層次。 首先，Storm在設計之初就考慮到了兼容多語言開發。Nimbus是一個thrift服務，topologies被定義為Thrift結構體.Thrift的運用使 ...
2013-09-18 17:17 2 2615 推薦指數：
相關推薦
【原】storm源碼之理解Storm中Worker、Executor、Task關系
Storm在集群上運行一個Topology時，主要通過以下3個實體來完成Topology的執行工作：1. Worker（進程）2. Executor（線程）3. Task下圖簡要描述了這3者之間的關系：1個worker進程執行的是1個topology的子集（注：不會出現1個worker為多個 ...
【原】storm源碼之一個class解決nimbus單點問題
一、storm nimbus 單節點問題概述 1、storm集群在生產環境部署之后，通常會是如下的結構：從圖中可以看出zookeeper和supervisor都是多節點，任意1個zookeeper節點宕機或supervisor節點宕機均不會對系統整體運行造成影響，但nimbus和ui都是單節點 ...
Storm在zookeeper上的目錄結構
storm操作zookeeper的主要函數都定義在命名空間backtype.storm.cluster中（即cluster.clj文件中）。 backtype.storm.cluster定義了兩個重要protocol：ClusterState和StormClusterState。clojure中 ...
Storm源碼閱讀之SpoutOutputCollector
不得不說storm是一個特別棒的實時計算框架。為了對后文理解的方便，先說幾個storm中的術語: Topology：拓撲圖或者拓撲結構。在storm中它通過消息分組的分式連接Spout和Bolt節點定義了運算處理的拓撲結構。如下圖: 那什么是Spout呢？ 在計算任務需要的數據 ...
打包運行storm代碼
兩個節點的storm集群： host01 host02 zk nimbus supervisor ...
Storm/JStorm之TopologyBuilder源碼閱讀
在Strom/JStorm中有一個類是特別重要的，主要用來構建Topology的，這個類就是TopologyBuilder. 咱先看一下簡單的例子: 在上面的main方法里先創建Top ...
Apache Storm源碼閱讀筆記
歡迎轉載，轉載請注明出處。 楔子 自從建了Spark交流的QQ群之后，熱情加入的同學不少，大家不僅對Spark很熱衷對於Storm也是充滿好奇。大家都提到一個問題就是有關storm內部實現機理的資料比較少,理解起來非常費勁。 盡管自己也陸續對storm的源碼走讀發表了一些博文，當時寫 ...