配置hive環境步驟(zookeeper高可用集群已搭建)


安裝mysql;
1. 檢查當前環境是否安裝mysql服務(命令:rpm -qa | grep -i mysql)
2. 卸載自帶的mysql
3. 卸載軟件:rpm -e --nodeps mysql-libs-5.1.71-1.el6.x86_64
4. 安裝mysql客戶端與服務器.
4.1下載依賴
sudo yum install libaio
sudo yum install perl
導入服務器,客戶端
rpm -ivh ./MySQL-client-5.1.73-1.glibc23.x86_64.rpm
rpm -ivh MySQL-server-5.1.73-1.glibc23.x86_64.rpm
3.2 MySQL服務啟動
檢查MySQL狀態 service mysql status
啟動MySQL服務 service mysql start
停止MySQL服務 service mysql stop
重啟MySQL服務 service mysql restart
3.3 Hive元數據庫創建與授權(非root用戶)
進人root用戶 mysql -uroot  [-proot]默認沒有設置密碼
在root用戶下: 創建hive庫並設置編碼為latin1(默認編碼)
create database hivedb default character set latin1;
alter database hivedb character set latin1;

在root用戶下添加添加用戶:hadoop
insert into mysql.user(Host,User,Password)values('192.168.192.1',
'hadoop',password('hadoop'));
在root用戶下給普通用戶hadoop授權於hivedb數據庫於Hadoop001主機:
grant all privileges on hivedb.* to 'hadoop'@'192.168.192.1'
identified by 'hadoop';

刷新后生效 flush privileges;
切換進入hadoop用戶 su hadoop
進人MySQL數據庫 mysql –h hdp-qm-01 -uhadoop -phadoop
查看數據 show databases
使用數據庫 use hivedb;
安裝hive:
上傳壓縮包解壓,重命名
tar -zxvf apache-hive-1.2.1-bin.tar.gz 、mv apache-hive-1.2.1-bin hive-1.2.1
配置環境變量,刷新
export HIVE_HOME=/home/hadoop/hive-1.2.1
:$HIVE_HOME/bin
source /etc/profile
新建:vi hive-site.xml,在conf目錄下配置hive-site.xml
<configuration>
<!--配置hive元數據庫存儲-->
<property>
<name>javax.jdo.option.ConnectionURL</name>
<value>jdbc:mysql://hdp-qm-01:3306/hivedb?characterEncoding=UTF-8</value>
</property>
<!--給hive添加mysql數據庫的驅動包,將驅動包添加到lib目錄下即可-->
<property>
<name>javax.jdo.option.ConnectionDriverName</name>
<value>com.mysql.jdbc.Driver</value>
</property>
<property>
<name>javax.jdo.option.ConnectionUserName</name>
<value>hadoop</value>/
</property>
<property>
<name>javax.jdo.option.ConnectionPassword</name>
<value>hadoop</value>
</property>
</configuration>
給hive添加mysql數據庫的驅動包,將驅動包添加到lib目錄下
啟動常見錯誤問題
 Jline包錯誤 版本與Hadoop不匹配,使用Hive的lib目錄下jline.xxx替換
hadoop/share/hadoop/yarn/lib的jline.xxx
先啟動zookeeper,再啟動集群,再啟動hive


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM