一、软件准备 scala-2.11.8.tgz spark-1.6.1-bin-hadoop2.6.tgz 二、Scala 安装 1、master 机器 (1)下载 scala-2.11.8.tgz， 解压到 /opt 目录下，即： /opt/scala-2.11.8。 (2)修改 ...

一、依赖文件安装 1.1 JDK 参见博文：http://www.cnblogs.com/liugh/p/6623530.html 二、文件准备 2.1 文件名称 hadoop-2.7.3.tar.gz 2.2 下载 ...

一、依赖文件安装 1.1 JDK 参见博文：http://www.cnblogs.com/liugh/p/6623530.html 二、文件准备 2.1 文件名称 zookeeper-3.4.9.tar.gz 2.2 下载 ...

一 下载安装包 1 官方下载 官方下载地址：http://spark.apache.org/downloads.html 2 安装前提 Java8 安装成功 zookeeper 安装参考：CentOS7.5搭建Zookeeper3.4.12集群 ...

为学习spark，虚拟机中开4台虚拟机安装spark3.0.0 底层hadoop集群已经安装好，见ol7.7安装部署4节点hadoop 3.2.1分布式集群学习环境 首先，去http://spark.apache.org/downloads.html下载对应安装包 解压 ...

1 VM网络配置... 3 2 CentOS配置... 5 2.1 下载地址... 5 2.2 ...

一、导读 最近开始学习大数据分析，说到大数据分析，就必须提到Hadoop与Spark。要研究大数据分析，就必须安装这两个软件，特此记录一下安装过程。Hadoop使用V2版本，Hadoop有单机、伪分布式、分布式三种部署方案，这里使用分布式部署方案。而Spark有三种部署方案：Standalone ...

1.选取三台服务器（CentOS系统64位） 　　114.55.246.88 主节点 　　114.55.246.77 从节点 　　114.55.246.93 从节点 之后的操作如果是 ...