第1章 Spark 整体概述 1.1 整体概念   Apache Spark 是一个开源的通用集群计算系统，它提供了 Hig ...

========== Spark 通信架构 ========== 1、spark 一开始使用 akka 作为网络通信框架，spark 2.X 版本以后完全抛弃 akka，而使 ...

问题导读：1.spark是如何提交作业的？2.Akka框架是如何实现的？3.如何实现调度的？前言 折腾了很久，终于开始学习Spark的源码了，第一篇我打算讲一下Spark作业的提交过程。 ...

第一章、spark源码分析之RDD四种依赖关系 一、RDD四种依赖关系 RDD四种依赖关系，分别是 ShuffleDependency、PrunDependency、RangeDependency ...