1.mysql安裝
這個安裝很簡單,是在線安裝,只需要按順序執行一下幾個命令就ok了。
(1)sudo apt-get install mysql-server
(2)sudo apt-get install mysql-client
(3)sudo apt-get install libmysqlclient-dev
安裝過程會讓你給數據庫root用戶輸入密碼,不要忽略。然后通過如下命令檢查是否安裝成功:
sudo netstat -tap | grep mysql
登錄驗證:
mysql -u root -p
就可以登錄到mysql了,可以執行show databases;查看數據庫:
2 hive配置
2.1 下載hive2.1.1安裝包,解壓到/usr/local目錄下,然后用mv命令重命名為hive,然后通過以下命令修改hive目錄的讀寫權限
chown -R 當前用戶名 /usr/local/hive
比如我當前用戶為hadoop,那么命令就如下:
chown -R hadoop /usr/local/hive
2.2 配置hive環境變量
export HIVE_HOME=/usr/local/hive
export PATH=$JAVA_HOME/bin:$JRE_HOME/bin:$HADOOP_HOME/bin:$HADOOP_HOME/sbin:$HBASE_HOME/bin:$HIVE_HOME/bin:$JAVA_HOME:$PATH
2.3 進入/usr/local/hive/conf目錄,這個目錄下存在的文件都是模板,需要復制和改名,要修改的如下
cp hive-env.sh.template hive-env.sh cp hive-default.xml.template hive-site.xml cp hive-log4j2.properties.template hive-log4j2.properties cp hive-exec-log4j2.properties.template hive-exec-log4j2.properties
2.4 在hdfs目錄下建立三個文件,用來存放hive信息,並賦予777權限
hdfs dfs -mkdir -p /user/hive/warehouse hdfs dfs -mkdir -p /user/hive/tmp hdfs dfs -mkdir -p /user/hive/log hdfs dfs -chmod -R 777 /user/hive/warehouse
hadoop fs -chmod 777 /user/hive/tmp hdfs dfs -chmod -R 777 /user/hive/tmp
hdfs dfs -chmod -R 777 /user/hive/log
2.5 修改hive-env.sh文件
export JAVA_HOME=/usr/java/jdk1.7.0_79 export HADOOP_HOME=/usr/local/hadoop export HIVE_HOME=/usr/local/hive export HIVE_CONF_DIR=/usr/local/hive/conf
2.6 修改hive-site.xml文件
<property> <name>hive.exec.scratchdir</name> <value>/user/hive/tmp</value> </property> <property> <name>hive.metastore.warehouse.dir</name> <value>/user/hive/warehouse</value> </property> <property> <name>hive.querylog.location</name> <value>/user/hive/log</value> </property> <property> <name>javax.jdo.option.ConnectionURL</name> <value>jdbc:mysql://localhost:3306/hive?createDatabaseIfNotExist=true&characterEncoding=UTF-8&useSSL=false</value> </property> <property> <name>javax.jdo.option.ConnectionDriverName</name> <value>com.mysql.jdbc.Driver</value> </property> <property> <name>javax.jdo.option.ConnectionUserName</name> <value>root</value> </property> <property> <name>javax.jdo.option.ConnectionPassword</name> <value>123456</value> </property>
2.7 創建/usr/local/hive/tmp文件夾
mkdir /usr/local/hive/tmp
然后在配置文件hive-site.xml中,把所有的${system:java.io.tmpdir} 都替換為/usr/local/hive/tmp,把所有的${system:user.name}替換為${user.name}
2.8 配置jdbc的驅動
下載mysql-connector-java-5.1.30-bin.jar 包,復制放到/usr/local/hive/lib目錄下就可以了
2.9 初始化hive,在hive2.0以后的版本,初始化命令都是:
schematool -dbType mysql -initSchema
2.10 初始化成功后,就可以運行hive了,可以檢測一下hive是否正常
如果配置了hive的bin環境變量,就可以在任意目錄下輸入hive,就可以進入hive了