【原創】大叔經驗分享（63）kudu vs parquet
數據可修改； 5）kudu集群重啟時間降低90%； 6）impala並行scan：scan kud ...
原文：【原創】大叔經驗分享（106）Impala讀取parquet時間字段時區偏移問題
parquet文件中的時間字段，在hive和spark sql中讀取正常，在impala中讀取會偏移 個小時 少 ，經測試結果如下： 一 不修改impala配置 由spark或hive寫入parquet spark和hive讀取正常 impala讀取偏移 小時 少 ，需要手工偏移from unixtime unix timestamp time 二 修改impala配置 use local tz ...
2020-06-08 20:44 0 669 推薦指數：
相關推薦
【原創】大叔經驗分享（83）impala執行多個select distinct
impala在一個select中執行多個count distinct時會報錯，比如執行 select key, count(distinct column_a), count(distinct column_b) from test_table group by key 會報 ...
【原創】大叔經驗分享（48）oozie中通過shell執行impala
oozie中通過shell執行impala，腳本如下： 直接執行shell腳本正常，在oozie中執行報錯： 按照提示修改PYTHON_EGG_CACHE即可 另外還可以通過beeline連接，則沒有python的問題， 詳見：https ...
【原創】大叔經驗分享（65）spark讀取不到hive表
spark 2.4.3 spark讀取hive表，步驟： 1）hive-site.xml hive-site.xml放到$SPARK_HOME/conf下 2）enableHiveSupport SparkSession.builder.enableHiveSupport ...
【原創】大叔經驗分享（60）hive和spark讀取kudu表
從impala中創建kudu表之后，如果想從hive或spark sql直接讀取，會報錯： 官方的解釋是： You will encounter this exception when you try to access a Kudu table using ...
【原創】大叔問題定位分享（38）impala報錯內存不足
impala有時查詢報錯內存不足,並持續一段時間后自動恢復,報錯時日志如下: 可以看到有5個query正在進行導致當前query獲取不到足夠的資源,查看impala日志 /var/log/impalad/impalad.INFO, 這5個query執行簡略 ...
【原創】大叔經驗分享（88）jenkins假死
jenkins安裝啟動后，使用systemctl來進行進程監控 # systemctl enable jenkins 但是還是經常發生jenkins進程掛了，不會自動重啟，通過syste ...
大叔經驗分享（127）impala3.4編譯安裝
准備 maven 下載 https://downloads.apache.org/impala/3.4.0/apache-impala-3.4.0.tar.gz 編譯 報錯處理 [ERROR] Failed to execute goal on project ...