HBase安裝和部署
使用的HBase版本是1.2.4
1.安裝步驟(默認hdfs已安裝好)
# 下載並解壓安裝包 cd tools/ tar -zxf hbase-1.2.4-bin.tar.gz # 重命名為hbase mv hbase-1.2.4 hbase # 將hadoop目錄下的hdfs-site.xml 和 core-stie.xml拷貝到 hbase下的conf 目錄中 cd /home/work/tools/hbase/conf cp /home/work/tools/hadoop/etc/hadoop/core-site.xml core-site.xml cp /home/work/tools/hadoop/etc/hadoop/hdfs-site.xml hdfs-site.xml # 在hbase-env.sh中配置JAVA_HOME,以及使用外部zk集群 export JAVA_HOME=/home/work/tools/jdk/jre export HBASE_MANAGES_ZK=false
# 修改hbase-site.xml(更多配置參數請參考官方文檔)
<configuration> <property> <name>hbase.tmp.dir</name> <value>/home/work/tmp</value> </property> <property> <name>hbase.rootdir</name> <!—hdfs路徑 --> <value>hdfs://cluster1/hbase</value> </property> <property> <name>hbase.cluser.distributed</name> <value>true</value> </property> <property> <name>base.zookeeper.quorum</name> <!-- 根據實際的zookeeper 配置--> <value>xxx:2181,xxx:2181,xxx:2181</value> </property> <property> <name>hbase.superuser </name> <value>cdacp</value> </property> <property> <name>hbase.rpc.engine </name> <value>org.apache.hadoop.hbase.ipc.SecureRpcEngine</value> </property> <property> <name>hbase.coprocessor.master.classes </name>
<value>org.apache.hadoop.hbase.security.access.AccessController</value> </property> <property> <name> hbase.coprocessor.region.classes </name> <value> org.apache.hadoop.hbase.security.token.TokenProvider,org.apache.hadoop.hbase.security.access.AccessController </value> </property> <property> <name>hbase.security.authorization</name> <value>true</value> </property> <property> <name>hbase.security.authentication</name> <value>simple</value> </property> <property> <name>hbase.local.dir </name> <value>${hbase.tmp.dir}/local/</value> </property> </configuration>
# 設置slave
vim regionservers
slave1
slave2
slave3
slave4
slave5
# 設置環境變量
vi ~/.bash_profile
export HBASE = /home/work/tools/hbase
export PATH = $HBASE/bin:$PATH
# 執行 source ~/.bash_profile立即生效
2.HBase的啟停
# 啟動HBase cd ~/tools/hbase/bin ./start-hbase.sh # 進入shell 命令行 cd tools/hbase/bin ./hbase shell # 如果設置好了環境變量,可以直接使用 # 停止HBase cd tools/hbase/bin ./stop-hbase.sh
# 查看hdfs上hbase目錄(在hbase-site.xml中配置)
# 查看hbase相關進程
# HBase集群HA驗證
可以到集群各節點嘗試kill掉HMaster或者HRegionServer進程,看看集群能否使用,是否會丟數據。
Kill以后再使用start-hbase.sh看看能否恢復被kill的進程。
3.WebUI界面查看集群
# 通過WebUI界面查看hbase集群
HMaster:http://xxx.xxx.xxx.xxx:16010
RegionServer:http://xxx.xxx.xxx.xxx:16030