spark-2.4.0-hadoop2.7-安装部署
1. 主机规划 主机名称 IP地址 操作系统 部署软件 运行进程 备注 mini01 172.16.1.11【内网】 10.0.0.11 【外网 ...
原文：spark-2.4.0-hadoop2.7-简单操作
. 说明 本文基于：spark . . hadoop . 高可用 HA 安装部署 . 启动Spark Shell 在任意一台有spark的机器上执行 注意： 如果启动spark shell时没有指定master地址，但是也可以正常启动spark shell和执行spark shell中的程序，其实是启动了spark的local模式，该模式仅在本机启动一个进程，没有与集群建立联系。 . . 相关截 ...
2018-12-02 19:48 0 1137 推荐指数：
相关推荐
spark-2.4.0-hadoop2.7-高可用(HA)安装部署
1. 主机规划 主机名称 IP地址 操作系统 部署软件 运行进程 备注 mini01 172.16.1.11【内网】 10.0.0.11 【外网 ...
spark-2.2.2-bin-hadoop2.7 安装
1.上传spark-2.2.2-bin-hadoop2.7.tgz 2.解压文件 tar -zxvf spark-2.2.2-bin-hadoop2.7.tgz -C /usr/local/ 3.进入conf/下把spark-env.sh.template改为spark ...
spark-3.1.1-bin-hadoop2.7安装配置
下载 wget https://mirrors.bfsu.edu.cn/apache/spark/spark-3.1.1/spark-3.1.1-bin-hadoop2.7.tgz 解压 tar -vxf spark-3.1.1-bin-hadoop2.7.tgz -C /opt ...
spark2.10安装部署（集成hadoop2.7+）
这里默认你的hadoop是已经安装好的，master是node1，slaver是node2-3，hdfs启动在node1，yarn启动在node2，如果没安装好hadoop可以看我前面的文章 因为这里是spark和hadoop集成，我已经预先启动好了hdfs 和 yarn；MapReduce ...
spark sql的简单操作
测试数据 sparkStu.text sparksql ...
大数据平台搭建：Hadoop-3.1.3+Hive-3.1.2+HBase-2.2.3+Zookeeper-3.5.7+Kafka_2.11-2.4.0+Spark-2.4.5
1.框架选型 hadoop-3.1.3 hive-3.1.2 zookeeper-3.5.7 hbase-2.2.3 kafka_2.11-2.4.0 spark-2.4.5-bin-hadoop2.7 2.安装前准备 1.关闭防火墙 2.安装 JDK 3.安装 Scala ...
spark快速入门之最简配置 spark 1.5.2 hadoop 2.7 配置
配置的伪分布式，ubuntu14.04上 先配置hadoop，参见这个博客，讲的很好 http://www.powerxing.com/install-hadoop/， 但是我在配的过程中还是遇到了问题： 问题1：设置免登录的时候，虽然是按步骤做的，但ssh localhost测试 ...