[一起學Hive]之十四-Hive的元數據表結構詳解
關鍵字：Hive元數據、Hive元數據表結構 之前在 “[一起學Hive]之一–Hive概述，Hive是什么”中介紹過，Hive自己維護了一套元數據，用戶通過HQL查詢時候，Hive首先需要結合元數據，將HQL翻譯成MapReduce去執行。 本文介紹一下Hive元數據中重要的一些表結構及用途 ...
原文：一起學Hive——總結復制Hive表結構和數據的方法
在使用Hive的過程中，復制表結構和數據是很常用的操作，本文介紹兩種復制表結構和數據的方法。 復制非分區表表結構和數據 Hive集群中原本有一張bigdata old表，通過下面的SQL語句可以將bigdata old的表結構和數據復制到bigdata new表： CREATE TABLE bigdata new AS SELECT FROM bigdata old 如果是分區表，則必須使用lik ...
2018-10-14 21:31 0 5741 推薦指數：
相關推薦
Hive 復制分區表和數據
1. 非分區表: 復制表結構： create table new_table as select * from exists_table where 1=0; 復制表結構和數據： create table new_table as select * from ...
[一起學Hive]之十三-Hive整合HBase，操作HBase表
關鍵字：Hive整合HBase、Hive操作HBase表 十二、Hive整合HBase，操作HBase表 HBase是被設計用來做k-v查詢的，但有時候，也會遇到基於HBase表的復雜統計，寫MR很不方便。Hive考慮到了這點，提供了操作HBase表的接口。 關於Hive操作HBase表 ...
一起學Hive——總結常用的Hive優化技巧
今天總結本人在使用Hive過程中的一些優化技巧，希望給大家帶來幫助。Hive優化最體現程序員的技術能力，面試官在面試時最喜歡問的就是Hive的優化技巧。 技巧1.控制reducer數量 下面的內容是我們每次在hive命令行執行SQL時都會打印出來的內容： 很多人都會有個疑問，上面的內容 ...
[一起學Hive]之六-Hive的動態分區
前面文章介紹了Hive中是支持分區的。 關系型數據庫（如Oracle）中，對分區表Insert數據時候，數據庫自動會根據分區字段的值，將數據插入到相應的分區中，Hive中也提供了類似的機制，即動態分區(Dynamic Partition)，只不過，使用Hive的動態分區，需要進行相應的配置 ...
[一起學Hive]之十八-Hive UDF開發
關鍵字：Hive udf、UDF、GenericUDF Hive中，除了提供豐富的內置函數（見[一起學Hive]之二–Hive函數大全-完整版）之外，還允許用戶使用Java開發自定義的UDF函數。 開發自定義UDF函數有兩種方式，一個是繼承 ...
一起學Hive——詳解四種導入數據的方式
在使用Hive的過程中，導入數據是必不可少的步驟，不同的數據導入方式效率也不一樣，本文總結Hive四種不同的數據導入方式： 從本地文件系統導入數據 從HDFS中導入數據 從其他的Hive表中導入數據 創建表的同時導入數據 使用導入數據時，會使 ...
[一起學Hive]之十五-分析Hive表和分區的統計信息(Statistics)
關鍵字：Hive統計信息、分析Hive表、Hive Statistics 類似於Oracle的分析表，Hive中也提供了分析表和分區的功能，通過自動和手動分析Hive表，將Hive表的一些統計信息存儲到元數據中。 表和分區的統計信息主要包括：行數、文件數、原始數據大小、所占存儲大小、最后一次 ...