原文:Apache Storm技术实战之1 -- WordCountTopology

欢迎转载,转载请注意出处,徽沪一郎。 源码走读系列 从代码层面分析了storm的具体实现,接下来通过具体的实例来说明storm的使用。因为目前storm已经正式迁移到Apache,文章系列也由twitter storm转为apache storm. WordCountTopology 使用storm来统计文件中的每个单词的出现次数。 通过该例子来说明tuple发送时的几个要素 source com ...

2014-01-05 21:16 1 3122 推荐指数:

查看详情

Apache Storm技术实战之3 -- TridentWordCount

欢迎转载,转载请注明出处。 介绍TridentTopology的使用,重点分析newDRPCStream和stateQuery的实现机理。 使用TridentTopology进行数据处理的时候, ...

Sun Jan 26 04:45:00 CST 2014 0 3248
Apache Storm

Apache Storm、Spark Streaming、Flink DataStream等。 ...

Thu Apr 18 00:22:00 CST 2019 0 724
Apache Storm

Apache Storm   1. Apache Storm是什么 2. Apache Storm核心概念 3. Storm原理架构 4. Storm集群安装部署 5. 启动storm ui、Nimbus和Supervisor 一、Apache Storm是什么 ...

Mon Nov 19 18:23:00 CST 2018 0 2159
Apache Spark技术实战之1 -- KafkaWordCount

欢迎转载,转载请注明出处,徽沪一郎。 概要 Spark应用开发实践性非常强,很多时候可能都会将时间花费在环境的搭建和运行上,如果有一个比较好的指导将会大大的缩短应用开发流程。Spark Strea ...

Sun Aug 03 05:57:00 CST 2014 3 9536
Apache Spark技术实战之9 -- 日志级别修改

摘要 在学习使用Spark的过程中,总是想对内部运行过程作深入的了解,其中DEBUG和TRACE级别的日志可以为我们提供详细和有用的信息,那么如何进行合理设置呢,不复杂但也绝不是将一个INFO换为T ...

Tue Apr 14 06:18:00 CST 2015 1 4060
Apache Spark技术实战之5 -- SparkR的安装及使用

欢迎转载,转载请注明出处,徽沪一郎。 概要 根据论坛上的信息,在Sparkrelease计划中,在Spark 1.3中有将SparkR纳入到发行版的可能。本文就提前展示一下如何安装及使用Spark ...

Mon Sep 29 05:18:00 CST 2014 0 4776
Apache Storm简介

Apache Storm简介 Storm是一个分布式的,可靠的,容错的数据流处理系统。Storm集群的输入流由一个被称作spout的组件管理,spout把数据传递给bolt, bolt要么把数据保存到某种存储器,要么把数据传递给其它的bolt。一个Storm集群就是在一连串的bolt之间转换 ...

Fri Nov 25 01:54:00 CST 2016 0 11428
Apache Storm 衍生项目之1 -- storm-yarn

欢迎转载,转载请注明出处,徽沪一郎。 概要 storm是一个近似于实时的计算框架,甩开hadoop上的原生mapreduce计算框架不只一条街。如果能将storm引入到hadoop中,对存储于hdfs的数据进行分析必然极大的提高处理性能。storm-yarn就是这样一个项目,由yahoo实现 ...

Thu Feb 13 00:51:00 CST 2014 5 1656
 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM