Ubuntu 12.04下spark1.0.0 集群搭建（原创）
spark1.0.0新版本的于2014-05-30正式发布啦，新的spark版本带来了很多新的特性，提供了更好的API支持，spark1.0.0增加了Spark SQL组件，增强了标准库（ML、streaming、GraphX）以及对JAVA和Python语言的支持； 下面，我们首先进 ...
原文：Spark1.0.0属性配置
：Spark . . 属性配置方式 Spark属性提供了大部分应用程序的控制项，并且可以单独为每个应用程序进行配置。 在Spark . . 提供了 种方式的属性配置： SparkConf方式 SparkConf方式可以直接将属性值传递到SparkContext SparkConf可以对某些通用属性直接配置，如master使用setMaster，appname使用setAppName 也可以使用s ...
2014-10-13 21:17 0 6067 推荐指数：
相关推荐
spark1.0.0 mllib机器学习库使用初探
本文机器学习库使用的部分代码来源于spark1.0.0官方文档。 mllib是spark对机器学习算法和应用的实现库，包括分类、回归、聚类、协同过滤、降维等，本文的主要内容为如何使用scala语言创建sbt工程实现机器学习算法，并进行本地和集群的运行。（初学者建议先在RDD交互式模式下按行输入 ...
关于yarn的spark配置属性
spark1.2.0 These are configs that are specific to Spark on YARN Property Name Default Meaning ...
Spark 下操作 HBase（1.0.0 新 API）
HBase经过七年发展，终于在今年2月底，发布了 1.0.0 版本。这个版本提供了一些让人激动的功能，并且，在不牺牲稳定性的前提下，引入了新的API。虽然 1.0.0 兼容旧版本的 API，不过还是应该尽早地来熟悉下新版API。并且了解下如何与当下正红的 Spark 结合，进行数据的写入与读取 ...
spark配置elasticsearch属性汇总(基于es7)
自动设置（“ Map / Reduce”模块除外，该模块需要手动配置）。 用于写入（但不读取）数据 ...
scala spark（2.10）读取kafka(2.11_1.0.0)示例
1、pom加载jar包 ...
Spark-1.0.0 standalone分布式安装教程
Spark目前支持多种分布式部署方式：一、Standalone Deploy Mode；二Amazon EC2、；三、Apache Mesos；四、Hadoop YARN。第一种方式是单独部署，不需要有依赖的资源管理器，其它三种都需要将spark部署到对应的资源管理器上。 除了部署的多种 ...
Spark记录-Spark on mesos配置
1.安装mesos #用centos6的源yum安装 # rpm -Uvh http://repos.mesosphere.io/el/6/noarch/RPMS/mesosphere-el- ...