原文:Apache Storm源码阅读笔记

欢迎转载,转载请注明出处。 楔子 自从建了Spark交流的QQ群之后,热情加入的同学不少,大家不仅对Spark很热衷对于Storm也是充满好奇。大家都提到一个问题就是有关storm内部实现机理的资料比较少,理解起来非常费劲。 尽管自己也陆续对storm的源码走读发表了一些博文,当时写的时候比较匆忙,有时候衔接的不是太好,此番做了一些整理,主要是针对TridentTopology部分,修改过的内容采 ...

2014-05-28 13:12 4 6883 推荐指数:

查看详情

Storm源码阅读之SpoutOutputCollector

不得不说storm是一个特别棒的实时计算框架。为了对后文理解的方便,先说几个storm中的术语: Topology:拓扑图或者拓扑结构。在storm中它通过消息分组的分式连接Spout和Bolt节点定义了运算处理的拓扑结构。如下图: 那什么是Spout呢? 在计算任务需要的数据 ...

Fri Aug 19 17:18:00 CST 2016 0 2969
Storm/JStorm之TopologyBuilder源码阅读

在Strom/JStorm中有一个类是特别重要的,主要用来构建Topology的,这个类就是TopologyBuilder. 咱先看一下简单的例子: 在上面的main方法里先创建Top ...

Mon Oct 17 00:28:00 CST 2016 0 2009
Apache Spark源码走读之1 -- Spark论文阅读笔记

欢迎转载,转载请注明出处,徽沪一郎。 楔子 源码阅读是一件非常容易的事,也是一件非常难的事。容易的是代码就在那里,一打开就可以看到。难的是要通过代码明白作者当初为什么要这样设计,设计之初要解决的主要问题是什么。 在对Spark的源码进行具体的走读之前,如果想要快速对Spark的有一个整体性 ...

Tue Apr 15 19:36:00 CST 2014 6 23402
[阅读笔记]fsnotify源码阅读

fsnotify的github地址是 https://github.com/howeyc/fsnotify fsnotify是一个文件夹监控应用。可以使用创建一个w ...

Mon Dec 03 02:41:00 CST 2012 0 3235
Apollo源码阅读笔记(二)

Apollo源码阅读笔记(二) 前面 分析了apollo配置设置到Spring的environment的过程,此文继续PropertySourcesProcessor.postProcessBeanFactory里面调用的第二个方法 ...

Mon Jan 07 22:01:00 CST 2019 0 1227
Spring源码阅读笔记

前言   作为一个Java开发者,工作了几年后,越发觉力有点不从心了,技术的世界实在是太过于辽阔了,接触的东西越多,越感到前所未有的恐慌。 每天捣鼓这个捣鼓那个,结果回过头来,才发现这个也不通 ...

Tue Jan 24 17:56:00 CST 2017 9 17891
Behinder源码阅读笔记

这几天把冰蝎V3.0 Beta11_t00ls的源码阅读了一遍,进行了特征相关的二次开发,绕过某些安全设备的检测。例如:(关于冰蝎流量绕过全流量分析安全设备的建议 #138) 可以说得上是阅读的比较细致了,包含功能的实现,主体实现思路及编程思想。抽时间整理到博客上,估计写的会比较啰嗦 ...

Sun Sep 19 03:16:00 CST 2021 0 194
HSF源码阅读笔记(一)

HSF(highspeed service framework ) 是淘宝内部使用的一个rpc(remote procedure call) 框架,最近在看Apache Mina的应用层协议的编解码器时,想到了看HSF的源码。 1、HSF单元测试环境的启动: HSF组开发同事提供了一个 ...

Wed Jan 23 05:10:00 CST 2013 1 9036
 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM