Hive中的桶表入門（適用於抽樣查詢）

1、基本概念 （1）桶表是對某一列數據進行哈希取值以將數據打散，然后放到不同文件中存儲。 （2）在hive分區表中，分區中的數據量過於龐大時，建議使用桶。 （3）在分桶時，對指定字段 ...

COS上傳圖片和顯示圖片

　　寫這篇文章之前，我也是剛剛實現COS上傳和顯示圖片。我百度了好多相關文章，COS上傳圖片成功的文章不少，上傳后顯示圖片的文章幾乎沒有。於是寫一篇記錄下。 　　COS上傳圖片推薦鏈接：https: ...

HUDI-0.11.0 BUCKET index on Flink 新特性試用

1.背景 在0.10.1版本下，用默認的index(FLINK_STATE)，在upsert的模式下，幾十億級別的數據更新會很消耗內存以及ckp時過長，因此切換到0.11.0的BUCKET索引； 僅對於當前環境：flink1.13.2 + hudi 0.11.0-(master ...