Spark入門實戰系列--3.Spark編程模型（上）--編程模型及SparkShell實戰
【注】該系列文章以及使用到安裝包/測試數據 可以在《傾情大奉送--Spark入門實戰系列》獲取 1、Spark編程模型 1.1 術語定義 l應用程序（Application）： 基於Spark的用戶程序，包含了一個Driver Program 和集群中多個的Executor； l驅動程序 ...
原文：Spark入門實戰系列--3.Spark編程模型（下）--IDEA搭建及實戰
注 該系列文章以及使用到安裝包 測試數據 可以在 傾情大奉送 Spark入門實戰系列 獲取 安裝IntelliJ IDEA IDEA 全稱 IntelliJ IDEA，是java語言開發的集成環境，IntelliJ在業界被公認為最好的java開發工具之一，尤其在智能代碼助手 代碼自動提示 重構 J EE支持 Ant JUnit CVS整合 代碼審查 創新的GUI設計等方面的功能可以說是超常的。I ...
2015-08-17 09:09 13 31725 推薦指數：
相關推薦
Spark入門實戰系列--6.SparkSQL（下）--Spark實戰應用
【注】該系列文章以及使用到安裝包/測試數據 可以在《傾情大奉送--Spark入門實戰系列》獲取 1、運行環境說明 1.1 硬軟件環境 l 主機操作系統：Windows 64位，雙核4線程，主頻2.2G，10G內存 l 虛擬軟件：VMware® Workstation 9.0.0 ...
Spark入門實戰系列--5.Hive（下）--Hive實戰
【注】該系列文章以及使用到安裝包/測試數據 可以在《傾情大奉送--Spark入門實戰系列》獲取 1、Hive操作演示 1.1 內部表 1.1.1 創建表並加載數據 第一步 啟動HDFS、YARN和Hive，啟動完畢后創建Hive數據庫 hive>create database ...
Spark入門實戰系列--7.Spark Streaming（下）--實時流計算Spark Streaming實戰
【注】該系列文章以及使用到安裝包/測試數據 可以在《傾情大奉送--Spark入門實戰系列》獲取 1、實例演示 1.1 流數據模擬器 1.1.1 流數據說明 在實例演示中模擬實際情況，需要源源不斷地接入流數據，為了在演示過程中更接近真實環境將定義流數據模擬器。該模擬器主要功能 ...
Spark入門實戰系列--8.Spark MLlib（下）--機器學習庫SparkMLlib實戰
【注】該系列文章以及使用到安裝包/測試數據 可以在《傾情大奉送--Spark入門實戰系列》獲取 1、MLlib實例 1.1 聚類實例 1.1.1 算法說明 聚類（Cluster analysis）有時也被翻譯為簇類，其核心任務是：將一組目標object划分為若干個簇，每個簇之間 ...
Spark入門實戰系列--2.Spark編譯與部署（下）--Spark編譯安裝
【注】該系列文章以及使用到安裝包/測試數據 可以在《傾情大奉送--Spark入門實戰系列》獲取 1、編譯Spark Spark可以通過SBT和Maven兩種方式進行編譯，再通過make-distribution.sh腳本生成部署包。SBT編譯需要安裝git工具 ...
Spark入門實戰系列--2.Spark編譯與部署（下）--Spark編譯安裝
【注】該系列文章以及使用到安裝包/測試數據 可以在《傾情大奉送--Spark入門實戰系列》獲取 1、編譯Spark Spark可以通過SBT和Maven兩種方式進行編譯，再通過make-distribution.sh腳本生成部署包。SBT編譯需要安裝git工具，而Maven安裝則需要maven ...
Spark入門實戰系列--2.Spark編譯與部署（上）--基礎環境搭建
【注】 1、該系列文章以及使用到安裝包/測試數據 可以在《傾情大奉送--Spark入門實戰系列》獲取； 2、Spark編譯與部署將以CentOS 64位操作系統為基礎，主要是考慮到實際應用一般使用64位操作系統，內容分為三部分：基礎環境搭建、Hadoop編譯安裝和Spark編譯安裝，該環境 ...