原文:Apache Storm技術實戰之1 -- WordCountTopology

歡迎轉載,轉載請注意出處,徽滬一郎。 源碼走讀系列 從代碼層面分析了storm的具體實現,接下來通過具體的實例來說明storm的使用。因為目前storm已經正式遷移到Apache,文章系列也由twitter storm轉為apache storm. WordCountTopology 使用storm來統計文件中的每個單詞的出現次數。 通過該例子來說明tuple發送時的幾個要素 source com ...

2014-01-05 21:16 1 3122 推薦指數:

查看詳情

Apache Storm技術實戰之3 -- TridentWordCount

歡迎轉載,轉載請注明出處。 介紹TridentTopology的使用,重點分析newDRPCStream和stateQuery的實現機理。 使用TridentTopology進行數據處理的時候, ...

Sun Jan 26 04:45:00 CST 2014 0 3248
Apache Storm

Apache Storm、Spark Streaming、Flink DataStream等。 ...

Thu Apr 18 00:22:00 CST 2019 0 724
Apache Storm

Apache Storm   1. Apache Storm是什么 2. Apache Storm核心概念 3. Storm原理架構 4. Storm集群安裝部署 5. 啟動storm ui、Nimbus和Supervisor 一、Apache Storm是什么 ...

Mon Nov 19 18:23:00 CST 2018 0 2159
Apache Spark技術實戰之1 -- KafkaWordCount

歡迎轉載,轉載請注明出處,徽滬一郎。 概要 Spark應用開發實踐性非常強,很多時候可能都會將時間花費在環境的搭建和運行上,如果有一個比較好的指導將會大大的縮短應用開發流程。Spark Strea ...

Sun Aug 03 05:57:00 CST 2014 3 9536
Apache Spark技術實戰之9 -- 日志級別修改

摘要 在學習使用Spark的過程中,總是想對內部運行過程作深入的了解,其中DEBUG和TRACE級別的日志可以為我們提供詳細和有用的信息,那么如何進行合理設置呢,不復雜但也絕不是將一個INFO換為T ...

Tue Apr 14 06:18:00 CST 2015 1 4060
Apache Spark技術實戰之5 -- SparkR的安裝及使用

歡迎轉載,轉載請注明出處,徽滬一郎。 概要 根據論壇上的信息,在Sparkrelease計划中,在Spark 1.3中有將SparkR納入到發行版的可能。本文就提前展示一下如何安裝及使用Spark ...

Mon Sep 29 05:18:00 CST 2014 0 4776
Apache Storm簡介

Apache Storm簡介 Storm是一個分布式的,可靠的,容錯的數據流處理系統。Storm集群的輸入流由一個被稱作spout的組件管理,spout把數據傳遞給bolt, bolt要么把數據保存到某種存儲器,要么把數據傳遞給其它的bolt。一個Storm集群就是在一連串的bolt之間轉換 ...

Fri Nov 25 01:54:00 CST 2016 0 11428
Apache Storm 衍生項目之1 -- storm-yarn

歡迎轉載,轉載請注明出處,徽滬一郎。 概要 storm是一個近似於實時的計算框架,甩開hadoop上的原生mapreduce計算框架不只一條街。如果能將storm引入到hadoop中,對存儲於hdfs的數據進行分析必然極大的提高處理性能。storm-yarn就是這樣一個項目,由yahoo實現 ...

Thu Feb 13 00:51:00 CST 2014 5 1656
 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM