SparkListener记录(spark-2.2.0)
这里记录一下SparkListener一些常用的监听使用方式 概述 代码记录 示例代码 示例代码使用 ...
原文：StreamingListener记录(spark-2.2.0)
记录spark streaming 中监听器StreamingListener的相关信息 概述 代码记录 示例代码 示例代码应用 ...
2018-01-31 16:23 0 1783 推荐指数：
相关推荐
sparkLauncher记录(spark-2.2.0)
sparkLauncher 代码记录 1.概述 2.launch方法 3.createBuilder方法 3.startApplication方法 ...
spark-2.2.0安装和部署——Spark集群学习日记
前言 在安装后hadoop之后，接下来需要安装的就是Spark。 scala-2.11.7下载与安装 具体步骤参见上一篇博文 Spark下载 为了方便，我直接是进入到了/usr/local文件夹下面进行下载spark-2.2.0 Spark安装之前的准备 文件 ...
Spark记录-源码编译spark2.2.0（结合Hive on Spark/Hive on MR2/Spark on Yarn）
#spark2.2.0源码编译 #组件：mvn-3.3.9 jdk-1.8 #wget http://mirror.bit.edu.cn/apache/spark/spark-2.2.0/spark-2.2.0.tgz ---下载源码 (如果是Hive on spark ...
Apache Spark 2.2.0 中文文档 - SparkR (R on Spark) | ApacheCN
SparkR (R on Spark) 概述 SparkDataFrame 启动: SparkSession 从 RStudio 来启动 创建 SparkDataFrames ...
Apache Spark 2.2.0 中文文档 - Spark Streaming 编程指南
Spark Streaming 编程指南 概述 一个入门示例 基础概念 依赖 初始化 StreamingContext Discretized Streams (DStreams)（离散化流） Input DStreams 和 Receivers（接收器 ...
Spark源码分析 之 Driver和Excutor是怎么跑起来的?(2.2.0版本)
今天抽空回顾了一下Spark相关的源码，本来想要了解一下Block的管理机制，但是看着看着就回到了SparkContext的创建与使用。正好之前没有正式的整理过这部分的内容，这次就顺带着回顾一下。 更多内容参考：我的大数据之路 Spark作为目前最流行的大数据计算框架，已经发展了几个 ...
Apache Spark 2.2.0 中文文档 - Spark SQL, DataFrames and Datasets Guide | ApacheCN
Spark SQL, DataFrames and Datasets Guide Overview SQL Datasets and DataFrames 开始入门 起始 ...