HBase2.0新特性解析
作者 | 個推大數據運維工程師 行者 升級背景 個推作為專業的數據智能服務商，在業務開展過程中存在海量的數據存儲與查詢的需求，為此個推選用了高可靠、高性能、面向列、可伸縮的分布式數據存儲系統——HBase。 然而，運行HBase老集群（使用HBase1.0版本）多年后，遇到了兩大問題：各節 ...
原文：scala操作HBase2.0
在前面： scala: . hbase: . . 開發工具：IDEA 准備工作： 將生產上的hbase中的conf hbase site.xml文件拷貝到idea中的src resources目錄下 將生產環境中hbase中的 HBASE HOME lib下的 .jar文件加載到IDEA中 點擊libraries gt 中間的 gt java 選擇jar包所放的位置，點擊OK 繼續點擊ok即可 ...
2018-11-06 15:35 0 1909 推薦指數：
相關推薦
HBase2.0中的Benchmark工具 — PerformanceEvaluation
簡介 在項目開發過程中，我們經常需要一些benchmark工具來對系統進行壓測，以獲得系統的性能參數，極限吞吐等等指標。 而在HBase中，就自帶了一個benchmark工具—PerformanceEvaluation，可以非常方便地對HBase的Put、Get、Scan等API進行性能測試 ...
HBase2.0的修復工具HBCK2
1. 背景 在了解HBCK2之前，建議先了解一下啥是HBCK。HBCK是HBase1.x中的命令，到了HBase2.x中，HBCK命令不適用，且它的寫功能（-fix）已刪除，它雖然還可以報告HBase2.x集群的狀態，但是由於它不了解HBase2.x集群內部的工作原理，因此其評估將不 ...
HBase2.0 meta信息丟失的修復方法
在HBase入庫日志中發現有一個表入庫失敗，檢查HBase服務端后發現該表的meta信息丟失了： 而HDFS上的region還在： 而HBCK工具不支持HBase2.0版本，只好自己寫一個修復工具。網上可以搜到前輩們自己編寫的一些工具，比如這一篇寫的就比較詳細 https ...
HBase2.0新特性之In-Memory Compaction
In-Memory Compaction是HBase2.0中的重要特性之一，通過在內存中引入LSM結構，減少多余數據，實現降低flush頻率和減小寫放大的效果。本文根據HBase2.0中相關代碼以及社區的討論、博客，介紹In-Memory Compaction的使用和實現原理。 原理 概念和數 ...
scala操作hbase案例
案例取自streaming-app項目 ...
Scala操作Hbase空指針異常java.lang.NullPointerException處理
Hbase版本：Hortonworks Hbase 1.1.2 問題描述：使用Scala操作Hbase時，發生空指針異常（java.lang.RuntimeException: java.lang.NullPointerException），異常如下： 問題分析： 該異常 ...
HBase（五）HBase的API操作
一、項目環境搭建 新建 Maven Project，新建項目后在 pom.xml 中添加依賴： 二、HBase API操作表和數據 注意，這部分的學習內容，我們先學習使用老版本的 API，接着再寫出新版本的 API 調用方式。因為在企業中，有些時候我們需要一些過時 ...