HBase BulkLoad批量寫入數據實戰

、HBase Handler數等）。今天這篇博客筆者將為大家分享使用HBase BulkLoad的方式 ...

mapreduce出現類似死鎖情況

在往hbase表里通過bulkload導數據時，某個mapreduce跑了一個多小時還沒跑，看yarn界面，發現map還有一小部分沒跑完，沒跑完的map全在pending，running中沒有，同時reduce在copy階段把資源全用光，導致map沒資源去跑，進而導致reduce一直在copy狀態 ...

Spark、BulkLoad Hbase、單列、多列

背景 之前的博客：Spark：DataFrame寫HFile （Hbase）一個列族、一個列擴展一個列族、多個列 用spark 1.6.0 和 hbase 1.2.0 版本實現過spark BulkLoad Hbase的功能,並且擴展了其只能操作單列的不便性。 現在要用spark 2.3.2 ...