kafka源碼分析之二客戶端分析

客戶端由兩種：生產者和消費者 1. 生產者 先看一下生產者的構造方法： 很多代碼是讀取配置文件，但紅色部分才是主要： 調用Sender線程的run方法 調用Ne ...

spark源碼解析之基本概念

從兩方面來闡述spark的組件，一個是宏觀上，一個是微觀上。 1. spark組件 要分析spark的源碼，首先要了解spark是如何工作的。spark的組件： 了解其工作過程先要了解基本概 ...

apache-spark導入eclipse環境

工作中用到了apache-spark，想深入了解一下，決定從源碼開始。 先導入到常用的ide，eclipse吧： 准備工作 　1. 下載Eclipse：http://scala-ide.org ...