原文:【原創】大叔經驗分享(100)Atlas導入hive元數據

首先要有HIVE HOME環境變量, 如果是apache,直接配置為解壓目錄 如果是CDH,設置如下: export HIVE HOME opt cloudera parcels CDH . . .cdh . . .p . lib hive 執行導入 bin import hive.sh...Failed to import Hive Meta Data 報錯,查看日志 提示找不到atlas ap ...

2020-01-11 16:27 1 3901 推薦指數:

查看詳情

原創大叔經驗分享(1)在yarn上查看hive完整執行sql

hive執行sql提交到yarn上的任務名字是被處理過的,通常只能顯示sql的前邊一段和最后幾個字符,這樣就會帶來一些問題: 1)相近時間提交了幾個相近的sql,相互之間無法區分; 2)一個任務有問題,想看下這個任務具體執行的是什么?是誰的任務? 通過以下方法可以查看: 1)如果任務 ...

Sat Dec 08 00:40:00 CST 2018 0 2375
原創大叔經驗分享(7)創建hive表時格式如何選擇

常用格式 textfile 需要定義分隔符,占用空間大,讀寫效率最低,非常容易發生沖突(分隔符)的一種格式,基本上只有需要導入數據的時候才會使用,比如導入csv文件; ROW FORMAT DELIMITED FIELDS TERMINATED BY '\u0001 ...

Thu Dec 13 01:18:00 CST 2018 0 944
 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM