原文:Storm-源碼分析-Topology Submit-Nimbus

Nimbus Server Nimbus server, 首先從啟動命令開始, 同樣是使用storm命令 storm nimbus 來啟動 看下源碼, 此處和上面client不同, jvmtype server , 最終調用 backtype.storm.daemon.nimbus 的main nimbus是用clojure實現的, 但是clojure是基於JVM的, 所以在最終發布的時候會產生n ...

2013-06-19 15:28 5 2707 推薦指數:

查看詳情

Storm-源碼分析-Topology Submit-Executor-mk-threads

對於executor thread是整個storm最為核心的代碼, 因為在這個thread里面真正完成了大部分工作, 而其他的如supervisor,worker都是封裝調用. 對於executor的mk-threads, 是通過mutilmethods對spout和bolt分別定義 ...

Tue Aug 06 01:22:00 CST 2013 3 2914
Storm-源碼分析-Topology Submit-Client

1 Storm Client 最開始使用storm命令來啟動topology, 如下 storm jar storm-starter-0.0.1-SNAPSHOT-standalone.jar storm.starter.WordCountTopology 這個storm命令 ...

Wed Jun 05 23:52:00 CST 2013 0 3142
Storm-源碼分析- metric

, (backtype.storm.daemon.builtin-metrics), 並注冊到topology context里面 task會不斷的利用如spout-ack ...

Tue Jul 30 22:23:00 CST 2013 0 3568
storm啟動nimbus源碼分析-nimbus.clj

nimbusstorm集群的"控制器",是storm集群的重要組成部分。我們可以通用執行bin/storm nimbus >/dev/null 2>&1 &來啟動nimbus。bin/storm是一個python腳本,在這個腳本中定義了一個nimbus函數 ...

Tue Sep 16 05:24:00 CST 2014 0 2162
Storm-源碼分析- Thrift的使用

1 IDL 首先是storm.thrift, 作為IDL里面定義了用到的數據結構和service 然后backtype.storm.generated, 存放從IDL通過Thrift自動轉化成的Java代碼 比如對於nimbus service 在IDL的定義為, 而對 ...

Wed Jun 05 00:50:00 CST 2013 5 3514
storm源碼分析topology提交過程

storm集群上運行的是一個個topology,一個topology是spouts和bolts組成的圖。當我們開發完topology程序后將其打成jar包,然后在shell中執行storm jar xxxxxx.jar xxxxxxxClass就可以將jar包上傳到storm集群的nimbus ...

Thu Apr 02 00:10:00 CST 2015 0 3338
 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM