原文:Spark SQL筆記——技術點匯總

目錄 概述 原理 組成 執行流程 性能 API 應用程序模板 通用讀寫方法 RDD轉為DataFrame Parquet文件數據源 JSON文件數據源 Hive數據源 數據庫JDBC數據源 DataFrame Operation 性能調優 緩存數據 參數調優 案例 數據准備 查詢部門職工數 查詢各部門職工工資總數,並排序 查詢各部門職工考勤信息 概述 . SparkSQL是Spark的結構化數據處 ...

2017-07-31 09:02 0 8948 推薦指數:

查看詳情

Spark筆記——技術匯總

目錄 · 概況 · 手工搭建集群 · 引言 · 安裝Scala · 配置文件 · 啟動與測試 · 應用部署 · 部署架構 · 應用程序 ...

Wed Aug 02 16:59:00 CST 2017 2 1255
Netty筆記——技術匯總

目錄 · Linux網絡IO模型 · 文件描述符 · 阻塞IO模型 · 非阻塞IO模型 · IO復用模型 · 信號驅動IO模型 · 異步I ...

Mon Aug 21 17:00:00 CST 2017 1 1185
ZooKeeper筆記——技術匯總

目錄 · ZooKeeper安裝 · 分布式一致性理論 · 一致性級別 · 集中式系統 · 分布式系統 · ACID特性 · CAP理論 ...

Thu Aug 10 17:02:00 CST 2017 1 1923
Hive筆記——技術匯總

目錄 · 概況 · 手工安裝 · 引言 · 創建HDFS目錄 · 創建元數據庫 · 配置文件 · 測試 · 原理 · 架構 ...

Tue Aug 01 17:02:00 CST 2017 0 4022
Redis筆記——技術匯總

目錄 · 特點 · 安裝 · 數據庫 · 服務器命令 · 數據類型及其操作命令 · 數據結構 · string · list · set · ...

Mon Aug 28 17:03:00 CST 2017 5 2007
JVM筆記——技術匯總

目錄 · 初步認識 · Java里程碑(關鍵部分) · 理解虛擬機 · Java虛擬機種類 · Java語言規范 · Java虛擬機規范 · 基本 ...

Mon Aug 14 17:04:00 CST 2017 1 1134
Spark SQL 筆記

Spark SQL 簡介 SparkSQL 的前身是 Shark, SparkSQL 產生的根本原因是其完全脫離了 Hive 的限制。(Shark 底層依賴於 Hive 的解析器, 查詢優化器) SparkSQL 支持查詢原生的 RDD ...

Tue Oct 29 05:13:00 CST 2019 0 314
 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM