【转】搭建spark环境 单机版
本文将介绍Apache Spark 1.6.0在单机的部署，与在集群中部署的步骤基本一致，只是少了一些master和slave文件的配置。直接安装scala与Spark就可以在单机使用，但如果用到hdfs系统的话hadoop和jdk也要配置，建议全部安装配置好。我的博客原文地址链接：http ...
原文：搭建Spark的单机版集群
一 创建用户 useradd spark passwd spark 二 下载软件 JDK，Scala，SBT，Maven 版本信息如下： JDK jdk u linux x .gz Scala scala . . .tgz SBT sbt . . .zip Maven apache maven . . bin.tar.gz 注意：如果只是安装Spark环境，则只需JDK和Scala即可，SBT和M ...
2016-01-18 09:05 0 6682 推荐指数：
相关推荐
搭建hadoop集群 单机版
二、在Ubuntu下创建hadoop用户组和用户 这里考虑的是以后涉及到hadoop应用时，专门用该用户操作。用户组名和用户名都设为：hadoop。可以理解为该ha ...
快速搭建redis单机版和redis集群版
单机版 第一步：需要安装redis所需的C语言环境，若虚拟机联网，则执行 yum install gcc-c++ 第二步：redis的源码包上传到linux系统 第三步：解压缩redis tar zxf redis的压缩文件 第四步：编译 ，进入redis源码 ...
Spark安装（单机版）
1. 下载安装 官网下载 选择版本和type，这里为 spark-2.4.4-bin-without-hadoop.tgz 1.1 命令下载： 1.2 解压重命名 1.3 配置环境变量 使用vim编辑~/.bashrc文件，加入以下配置(目录换成自己的安装 ...
spark 单机版安装
jdk-8u73-linux-x64.tar.gz hadoop-2.6.0.tar.gz scala-2.10.6.tgz spark-1.6.0-bin-hadoop2.6.tgz 1.安装jdk 解压jdk安装包到任意目录： cd /home ...
单机版Kubernetes集群（一）
环境：CentOS Linux release 7.4.1708 (Core) 单机版Kubernetes集群的效果，如图： 1）JSP页面通过JDBC直接访问Mysql数据库并展示；这里只是为了实现，只要程序正确连接到了数据库上，它就会自动完成对应的Table ...
docker-compose搭建mongodb分片集群(单机版)
mongodb分片机制原理 一、概念： 分片（sharding）是指将数据库拆分，将其分散在不同的机器上的过程。将数据分散到不同的机器上，不需要功能强大的服务器就可以存储更多的数 ...
基于docker环境搭建kafka集群（单机版）
1.kafka依赖于zookeeper（传送门https://www.cnblogs.com/answerThe/p/11267179.html），所以需要拉取kafka和zookeeper镜像。 ...