mysql與hive2.1.1安裝和配置


1.mysql安裝

這個安裝很簡單,是在線安裝,只需要按順序執行一下幾個命令就ok了。

(1)sudo apt-get install mysql-server

(2)sudo apt-get install mysql-client

(3)sudo apt-get install libmysqlclient-dev

安裝過程會讓你給數據庫root用戶輸入密碼,不要忽略。然后通過如下命令檢查是否安裝成功:

sudo netstat -tap | grep mysql

登錄驗證:

mysql -u root -p

就可以登錄到mysql了,可以執行show databases;查看數據庫:

2 hive配置

2.1 下載hive2.1.1安裝包,解壓到/usr/local目錄下,然后用mv命令重命名為hive,然后通過以下命令修改hive目錄的讀寫權限

chown -R 當前用戶名 /usr/local/hive

比如我當前用戶為hadoop,那么命令就如下:

chown -R hadoop /usr/local/hive

2.2 配置hive環境變量

export HIVE_HOME=/usr/local/hive

export PATH=$JAVA_HOME/bin:$JRE_HOME/bin:$HADOOP_HOME/bin:$HADOOP_HOME/sbin:$HBASE_HOME/bin:$HIVE_HOME/bin:$JAVA_HOME:$PATH

2.3 進入/usr/local/hive/conf目錄,這個目錄下存在的文件都是模板,需要復制和改名,要修改的如下

cp hive-env.sh.template hive-env.sh
cp hive-default.xml.template hive-site.xml
cp hive-log4j2.properties.template hive-log4j2.properties
cp hive-exec-log4j2.properties.template hive-exec-log4j2.properties

2.4 在hdfs目錄下建立三個文件,用來存放hive信息,並賦予777權限

hdfs dfs -mkdir -p /user/hive/warehouse
hdfs dfs -mkdir -p /user/hive/tmp
hdfs dfs -mkdir -p /user/hive/log
hdfs dfs -chmod -R 777 /user/hive/warehouse
hadoop fs -chmod 777 /user/hive/tmp hdfs dfs
-chmod -R 777 /user/hive/tmp
hdfs dfs
-chmod -R 777 /user/hive/log

2.5 修改hive-env.sh文件

export JAVA_HOME=/usr/java/jdk1.7.0_79
export HADOOP_HOME=/usr/local/hadoop
export HIVE_HOME=/usr/local/hive
export HIVE_CONF_DIR=/usr/local/hive/conf 

2.6 修改hive-site.xml文件

<property>
    <name>hive.exec.scratchdir</name>
    <value>/user/hive/tmp</value>
</property>
<property>
    <name>hive.metastore.warehouse.dir</name>
    <value>/user/hive/warehouse</value>
</property>
<property>
    <name>hive.querylog.location</name>
    <value>/user/hive/log</value>
</property>

<property>
    <name>javax.jdo.option.ConnectionURL</name>
    <value>jdbc:mysql://localhost:3306/hive?createDatabaseIfNotExist=true&amp;characterEncoding=UTF-8&amp;useSSL=false</value>
  </property>
  <property>
    <name>javax.jdo.option.ConnectionDriverName</name>
    <value>com.mysql.jdbc.Driver</value>
  </property>
  <property>
    <name>javax.jdo.option.ConnectionUserName</name>
    <value>root</value>
  </property>
  <property>
    <name>javax.jdo.option.ConnectionPassword</name>
    <value>123456</value>
  </property>

2.7 創建/usr/local/hive/tmp文件夾

mkdir /usr/local/hive/tmp

然后在配置文件hive-site.xml中,把所有的${system:java.io.tmpdir} 都替換為/usr/local/hive/tmp,把所有的${system:user.name}替換為${user.name}

2.8 配置jdbc的驅動

下載mysql-connector-java-5.1.30-bin.jar 包,復制放到/usr/local/hive/lib目錄下就可以了

2.9 初始化hive,在hive2.0以后的版本,初始化命令都是:

schematool -dbType mysql -initSchema

2.10 初始化成功后,就可以運行hive了,可以檢測一下hive是否正常

如果配置了hive的bin環境變量,就可以在任意目錄下輸入hive,就可以進入hive了

 


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM