Hadoop 2.7.1 源代碼目錄結構分析
采用的源代碼是2.7.1的，從這個網站下可以找到2.7.1的代碼：https://git1-us-west.apache.org/ ，使用gitclone出來，然后git checkout到2.7.1的分支上： 整個hadoop項目包括了幾十個文件目錄，每一個目錄一般都是一個Maven工程 ...
原文：hadoop IPC 源代碼分析
如圖所示， 在hadoop中客戶端需要和服務端通信 。 首先我們看一下需求是啥。 舉一個例子，在客戶端想要往hadoop集群中寫數據的時候，它需要先和namenode通信，以便獲得 諸一個blockID。 這時 ，我們希望在客戶端可以做到 諸如 調用一個方法 如 getBlockID 則就獲得了服務端的發過來的ID ，如果調用本地方法一樣。 需求搞定，我們看現實有的條件 服務端通信我們有的能力為 ...
2013-08-21 11:14 0 2612 推薦指數：
相關推薦
Hadoop源代碼分析(完整版)
Hadoop源代碼分析（一） 關鍵字: 分布式雲計算 Google的核心競爭技術是它的計算平台。Google的大牛們用了下面5篇文章，介紹了它們的計算設施。 GoogleCluster：http://research.google.com/archive/googlecluster.html ...
調試 Hadoop 源代碼
環境是 64bit Ubuntu 14.04 系統, jdk 1.7 以及 Eclipse Mars (4.5) 這里介紹兩種調試 Hadoop 源代碼的方法: 利用 Eclipse 遠程調試工具和打印調試日志. 這兩種方法均可以調試偽分布式工作模式和完全分布式工作模式下 ...
怎么調試Hadoop源代碼
hadoop基礎教程：調試Hadoop源代碼，這里介紹兩種調試Hadoop源代碼的方法：利用Eclipse遠程調試工具和打印調試日志。這兩種方法均可以調試偽分布式工作模式和完全分布式工作模式下的Hadoop。本節主要介紹偽分布式工作模式下的Hadoop調試方法。 (1)利用Eclipse進行遠程 ...
hadoop源代碼分析（4）-org.apache.hadoop.util包-GenericOptionsParser類【原創】
一 准備 hadoop版本：1.0.3，GenericOptionsParser所在的包：org.apache.hadoop.util 學習方法：理解GenericOptionsParser這個解析器的使用地方，從構造函數入手，理解GenericOptionsParser整個類 ...
RingBuffer源代碼分析
看到一篇寫的非常詳細的帖子，為防止樓主刪帖后找不到，果斷轉載過來 RingBuffer源代碼分析 出處： http://bbs.ickey.cn/community/forum.php?mod=viewthread&tid=43202(出處: ICKEY BBS) 大家都知道，環形緩沖 ...
Activiti源代碼分析
ExecutionEntity內部含有parent，是一個運行樹或運行路徑。應該是一個流程實例的運行過程，一個實例相應一個ExecutionEntity，通過getActivity得到的是 ...
RTMPDump源代碼分析
0： 主要函數調用分析 rtmpdump 是一個用來處理 RTMP 流媒體的開源工具包，支持 rtmp://, rtmpt://, rtmpe://, rtmpte://, and rtmps://.也提供 Android 版本。 最近研究了一下它內部函數調用的關系。 下面列出幾個主要 ...