Ambari2.6.0 安裝HDP2.6.3（離線安裝）

本文轉載自查看原文 2018-04-25 13:54 21449 hadoop

一、下載安裝包

　　因為使用在線安裝特別慢，所有的安裝包加起來有9個G左右，所以本教程是通過迅雷下載包，然后上傳到服務器，通過配置本地源的方式來實現的離線安裝。通過ambari安裝需要下載下面的三個主要包：

HDP：http://public-repo-1.hortonworks.com/HDP/centos7/2.x/updates/2.6.3.0/HDP-2.6.3.0-centos7-rpm.tar.gz

ambari：http://public-repo-1.hortonworks.com/ambari/centos7/2.x/updates/2.6.0.0/ambari-2.6.0.0-centos7.tar.gz

HDP-UTILS：http://public-repo-1.hortonworks.com/HDP-UTILS-1.1.0.21/repos/centos7/HDP-UTILS-1.1.0.21-centos7.tar.gz

注意問題：安裝的centos系統必選選擇英文版本，不然里面有些地方為莫名出錯

二、系統環境配置

1、安裝jdk（所有機器）

一般linux自帶的jdk或者是通過yum安裝的jdk都是openjdk,但是最好是使用oracle/sun jdk,前者是開源的，缺失部分功能，后者是官方的。但是如果直接安裝oracle的jdk，第三方的依賴包不會安裝，所以最有效的額方式是通過yum安裝openjdk，並同時安裝了第三方依賴包，然后卸載openjdk，通過自己來安裝oracle的jdk，就能解決依賴問題。

（1）安裝openjdk

[root@master ~]# yum -y install java
[root@master ~]# java -version
openjdk version "1.8.0_161"
OpenJDK Runtime Environment (build 1.8.0_161-b14)
OpenJDK 64-Bit Server VM (build 25.161-b14, mixed mode)
[root@master ~]# rpm -qa|grep java
javapackages-tools-3.4.1-11.el7.noarch
java-1.8.0-openjdk-1.8.0.161-0.b14.el7_4.x86_64
python-javapackages-3.4.1-11.el7.noarch
tzdata-java-2018d-1.el7.noarch
java-1.8.0-openjdk-headless-1.8.0.161-0.b14.el7_4.x86_64

（2）下載oracle

下載地址：http://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html

選擇下載上面標紅的jdk的版本1.8.0_161 jdk-8u161-linux-x64.rpm，然后上傳到服務器

（3）卸載OpenJDK

[root@master ~]# rpm -e --nodeps java-1.8.0-openjdk-headless-1.8.0.161-0.b14.el7_4.x86_64
[root@master ~]# rpm -e --nodeps java-1.8.0-openjdk-1.8.0.161-0.b14.el7_4.x86_64

（4）安裝下載好的jdk

[root@master ~]# rpm -ivh jdk-8u161-linux-x64.rpm 
准備中...                          ################################# [100%]
正在升級/安裝...
   1:jdk1.8-2000:1.8.0_161-fcs        ################################# [100%]
Unpacking JAR files...
    tools.jar...
    plugin.jar...
    javaws.jar...
    deploy.jar...
    rt.jar...
    jsse.jar...
    charsets.jar...
    localedata.jar...
[root@master ~]# java -version
java version "1.8.0_161"
Java(TM) SE Runtime Environment (build 1.8.0_161-b12)
Java HotSpot(TM) 64-Bit Server VM (build 25.161-b12, mixed mode)
[root@master ~]# javac -version
javac 1.8.0_161

2、修改本機名（所有機器）

　　通過vi /etc/hostname 進行修改

　　各個節點修改成相應的名稱，分別為master,slave1.slave2.slave3,例

master

　　然后重啟電腦

3、修改/etc/hosts文件（所有機器）

　　這里主要是為了可以實現通過名稱來查找相應的服務器

[root@master ~]# vi /etc/hosts
127.0.0.1   localhost localhost.localdomain localhost4 localhost4.localdomain4
::1 localhost localhost.localdomain localhost6 localhost6.localdomain6 192.168.12.101 master 192.168.12.102 slave1 192.168.12.103 slave2 192.168.12.104 slave3

　4、修改/etc/sysconfig/network（所有機器）

[root@master ~]# vi /etc/sysconfig/network
# Created by anaconda
NETWORKING=yes

　　接下來就可以通過測試一下是否可以通過ping主機名來找到對應的服務器

[root@master ~]# ping slave1
PING slave1 (192.168.12.102) 56(84) bytes of data.
64 bytes from slave1 (192.168.12.102): icmp_seq=1 ttl=63 time=0.134 ms 64 bytes from slave1 (192.168.12.102): icmp_seq=2 ttl=63 time=0.132 ms 64 bytes from slave1 (192.168.12.102): icmp_seq=3 ttl=63 time=0.133 ms 64 bytes from slave1 (192.168.12.102): icmp_seq=4 ttl=63 time=0.133 ms 64 bytes from slave1 (192.168.12.102): icmp_seq=5 ttl=63 time=0.132 ms ^C --- slave1 ping statistics --- 5 packets transmitted, 5 received, 0% packet loss, time 4000ms rtt min/avg/max/mdev = 0.132/0.132/0.134/0.014 ms

5、修改文件打開限制（所有機器）

[root@master ~]# vi /etc/security/limits.conf
# End of file
* soft nofile 65536
* hard nofile 65536
* soft nproc 131072
* hard nproc 131072

6、關閉防火牆（所有機器）

[root@master~]#systemctl disable firewalld
[root@master~]#systemctl stop firewalld

　　除此之外

[root@master ~]# cat /etc/selinux/config 
# This file controls the state of SELinux on the system.
# SELINUX= can take one of these three values:
#     enforcing - SELinux security policy is enforced.
#     permissive - SELinux prints warnings instead of enforcing.
#     disabled - No SELinux policy is loaded.
SELINUX=disabled
# SELINUXTYPE= can take one of these two values:
#     targeted - Targeted processes are protected,
#     mls - Multi Level Security protection.
SELINUXTYPE=targeted

7、同步時鍾

（1）安裝ntp服務（所有機器）

[root@master ~]#yum -y install ntp

（2）設置master為主服務器，開啟nptd服務(主服務器)

[root@master ~]#vi /etc/ntp.conf

如圖：

[root@master ~]# systemctl start ntpd.service       #啟動服務
[root@master ~]# systemctl enable ntpd.service      #開機自啟動

(3)、子節點設置同步（子節點）

　　主服務器開啟ntp服務器以后，子節點就不需要開啟了，因為當server與client之間的時間誤差過大時（可能是1000秒），處於對修改時間可能對系統和應用帶來不可預知的問題，NTP將停止時間同步！所以如果發現NTP啟動之后時間並不進行同步時，應該考慮到可能是時間差過大引起的，此時需要先手動進行時間同步！所以直接使用定時手動同步的方式就可以了。

[root@slave1 data]# crontab -e
0-59/10 * * * * /usr/sbin/ntpdate master
crontab: installing new crontab
[root@slave1 data]# crontab -l
0-59/10 * * * * /usr/sbin/ntpdate master

8、SSH無密碼登陸（主節點）

配置master節點無密碼登錄到其他節點，在master節點上操作

[root@master ~]# ssh-keygen -t rsa
Generating public/private rsa key pair.
Enter file in which to save the key (/root/.ssh/id_rsa): 
Created directory '/root/.ssh'.
Enter passphrase (empty for no passphrase): 
Enter same passphrase again: 
Your identification has been saved in /root/.ssh/id_rsa.
Your public key has been saved in /root/.ssh/id_rsa.pub.
The key fingerprint is:
SHA256:NMVPXezqq+MPf95MtP5bzaghnvXSljcC4BH/QFCvm+I root@master
The key's randomart image is:
+---[RSA 2048]----+
|         o+. . o.|
|         o..o . .|
|        o +o . . |
|       . + oo   .|
|        S o.o  ..|
|         . .o..+o|
|         ..o=o.o=|
|        ...+oB*+=|
|         Eo.+**BO|
+----[SHA256]-----+
[root@master ~]# ssh-copy-id slave1
/usr/bin/ssh-copy-id: INFO: Source of key(s) to be installed: "/root/.ssh/id_rsa.pub"
The authenticity of host 'slave1 (192.168.12.102)' can't be established.
ECDSA key fingerprint is SHA256:GG4+viH+NDpVisSLMobnjEYOs171XRVUDoG85EI+mI8.
ECDSA key fingerprint is MD5:f3:bf:63:a6:89:61:c2:08:3c:7d:2a:ed:13:be:d3:ae.
Are you sure you want to continue connecting (yes/no)? yes
/usr/bin/ssh-copy-id: INFO: attempting to log in with the new key(s), to filter out any that are already installed
/usr/bin/ssh-copy-id: INFO: 1 key(s) remain to be installed -- if you are prompted now it is to install the new keys
root@slave1's password: 
Permission denied, please try again.
root@slave1's password: 
Permission denied, please try again.
root@slave1's password: 

Number of key(s) added: 1

Now try logging into the machine, with:   "ssh 'slave1'"
and check to make sure that only the key(s) you wanted were added.

[root@master ~]# ssh-copy-id slave2
/usr/bin/ssh-copy-id: INFO: Source of key(s) to be installed: "/root/.ssh/id_rsa.pub"
The authenticity of host 'slave2 (192.168.12.103)' can't be established.
ECDSA key fingerprint is SHA256:Yv86oeVgTcxv8FCm5FLpiEUBTAnXgH2GOkgGboyoR+8.
ECDSA key fingerprint is MD5:8c:ae:b6:c4:f1:77:1e:ab:a5:16:38:a2:d2:da:4c:af.
Are you sure you want to continue connecting (yes/no)? yes
/usr/bin/ssh-copy-id: INFO: attempting to log in with the new key(s), to filter out any that are already installed
/usr/bin/ssh-copy-id: INFO: 1 key(s) remain to be installed -- if you are prompted now it is to install the new keys
root@slave2's password: 

Number of key(s) added: 1

Now try logging into the machine, with:   "ssh 'slave2'"
and check to make sure that only the key(s) you wanted were added.

[root@master ~]# ssh-copy-id slave3
/usr/bin/ssh-copy-id: INFO: Source of key(s) to be installed: "/root/.ssh/id_rsa.pub"
The authenticity of host 'slave3 (192.168.12.104)' can't be established.
ECDSA key fingerprint is SHA256:GbLAIxb/anYb/TSicoZlt88DQnb331Fb0Ob5fu8xOxY.
ECDSA key fingerprint is MD5:2b:60:e4:e4:d2:37:2a:8b:fc:66:c2:e9:96:03:7e:d4.
Are you sure you want to continue connecting (yes/no)? yes
/usr/bin/ssh-copy-id: INFO: attempting to log in with the new key(s), to filter out any that are already installed
/usr/bin/ssh-copy-id: INFO: 1 key(s) remain to be installed -- if you are prompted now it is to install the new keys
root@slave3's password: 

Number of key(s) added: 1

Now try logging into the machine, with:   "ssh 'slave3'"
and check to make sure that only the key(s) you wanted were added.

[root@master ~]# ssh-copy-id master
/usr/bin/ssh-copy-id: INFO: Source of key(s) to be installed: "/root/.ssh/id_rsa.pub"
The authenticity of host 'master (192.168.12.101)' can't be established.
ECDSA key fingerprint is SHA256:cdz8o54DsUQzXr5vZyeSJUbVUYYZe6bGhmUPbiGW+eY.
ECDSA key fingerprint is MD5:0f:f1:23:22:29:07:eb:84:21:c9:5e:f1:31:f5:b0:77.
Are you sure you want to continue connecting (yes/no)? yes
/usr/bin/ssh-copy-id: INFO: attempting to log in with the new key(s), to filter out any that are already installed
/usr/bin/ssh-copy-id: INFO: 1 key(s) remain to be installed -- if you are prompted now it is to install the new keys
root@master's password: 

Number of key(s) added: 1

Now try logging into the machine, with:   "ssh 'master'"
and check to make sure that only the key(s) you wanted were added.

測試是否實現了無密碼登錄

[root@master ~]# ssh slave1 date ;ssh slave2 date;ssh slave3 date;ssh master date;
2018年 04月 23日 星期一 14:18:13 CST
2018年 04月 23日 星期一 14:18:13 CST
2018年 04月 23日 星期一 14:18:13 CST
2018年 04月 23日 星期一 14:18:13 CST

將創建的秘鑰拷貝出來，因為后面ambari安裝的時候需要上傳這個秘鑰。創建秘鑰是在隱藏文件夾/root/.ssh/下面的，所以需要先把秘鑰拷貝到可見區域，然后拷貝到電腦上。下面標紅的就是秘鑰文件

[root@master ~]# cd /root/.ssh/
[root@master .ssh]# ls
authorized_keys  id_rsa  id_rsa.pub  known_hosts
[root@master .ssh]# cp id_rsa /root/
[root@master .ssh]# ls /root/
anaconda-ks.cfg   id_rsa  jdk-8u161-linux-x64.rpm

9、其他系統設置（所有機器）

[root@master ~]# sudo sh -c "echo umask 0022 >> /etc/profile"

三、修改yum源，實現離線安裝

1、安裝httpd服務（主服務器）

[root@master ~]# yum -y install httpd
[root@master ~]# service httpd restart
Redirecting to /bin/systemctl restart httpd.service
[root@master ~]# chkconfig httpd on

2、將上面下載的三個包放到/var/www/html目錄下（主服務器）

[root@master ~]# cd /var/www/html/
[root@master html]# mkdir ambari
拷貝文件到ambari下面
[root@master html]# cd ambari/
[root@master ambari]# ls
ambari-2.6.0.0-centos7.tar.gz  HDP-2.6.3.0-centos7-rpm.tar.gz  HDP-UTILS-1.1.0.21-centos7.tar.gz
[root@master ambari]# tar -zxvf ambari-2.6.0.0-centos7.tar.gz
[root@master ambari]# tar -zxvf HDP-2.6.3.0-centos7-rpm.tar.gz 
[root@master ambari]# mkdir HDP-UTILS
[root@master ambari]# tar -zxvf HDP-UTILS-1.1.0.21-centos7.tar.gz -C HDP-UTILS
[root@master ambari]# rm -rf ambari-2.6.0.0-centos7.tar.gz HDP-2.6.3.0-centos7-rpm.tar.gz HDP-UTILS-1.1.0.21-centos7.tar.gz 
[root@master ambari]# ls
ambari  HDP  HDP-UTILS

現在可以通過訪問http://192.168.12.101/ambari/查看是否能成功訪問

3、制作本地源

（1）安裝本地源制作相關工具（主服務器）

[root@master ambari]# yum install yum-utils createrepo yum-plugin-priorities -y
[root@master ambari]#  createrepo  ./

（2）修改文件里面的源地址（主服務器）

[root@master ambari]# vi ambari/centos7/2.6.0.0-267/ambari.repo
#VERSION_NUMBER=2.6.0.0-267
[ambari-2.6.0.0]
name=ambari Version - ambari-2.6.0.0
baseurl=http://192.168.12.101/ambari/ambari/centos7/2.6.0.0-267
gpgcheck=1
gpgkey=http://192.168.12.101/ambari/ambari/centos7/2.6.0.0-267/RPM-GPG-KEY/RPM-GPG-KEY-Jenkins
enabled=1
priority=1
[root@master ambari]# cp ambari/centos7/2.6.0.0-267/ambari.repo /etc/yum.repos.d/
[root@master ambari]# vi HDP/centos7/2.6.3.0-235/hdp.repo
#VERSION_NUMBER=2.6.3.0-235
[HDP-2.6.3.0]
name=HDP Version - HDP-2.6.3.0
baseurl=http://192.168.12.101/ambari/HDP/centos7/2.6.3.0-235
gpgcheck=1
gpgkey=http://192.168.12.101/ambari/HDP/centos7/2.6.3.0-235/RPM-GPG-KEY/RPM-GPG-KEY-Jenkins
enabled=1
priority=1


[HDP-UTILS-1.1.0.21]
name=HDP-UTILS Version - HDP-UTILS-1.1.0.21
baseurl=http://192.168.12.101/ambari/HDP-UTILS
gpgcheck=1
gpgkey=http://192.168.12.101/ambari/HDP-UTILS/RPM-GPG-KEY/RPM-GPG-KEY-Jenkins
enabled=1
priority=1
[root@master ambari]# cp HDP/centos7/2.6.3.0-235/hdp.repo /etc/yum.repos.d/

上面就創建好了主機上的文件，然后可以通過下面命令清楚一下yum的緩存就可以了

[root@master ambari]# yum clean all
[root@master ambari]# yum makecache
[root@master ambari]# yum repolist

（3）將創建好的文件拷貝到子節點（主服務器）

[root@master ambari]#cd /etc/yum.repos.d
[root@master yum.repos.d]# scp ambari.repo slave1:/etc/yum.repos.d/
ambari.repo                                                                                        100%  274    16.3KB/s   00:00    
[root@master yum.repos.d]# scp ambari.repo slave2:/etc/yum.repos.d/
ambari.repo                                                                                        100%  274   115.7KB/s   00:00    
[root@master yum.repos.d]# scp ambari.repo slave3:/etc/yum.repos.d/
ambari.repo                                                                                        100%  274   608.9KB/s   00:00    
[root@master yum.repos.d]# scp hdp.repo slave1:/etc/yum.repos.d/
hdp.repo                                                                                           100%  482     1.1MB/s   00:00    
[root@master yum.repos.d]# scp hdp.repo slave2:/etc/yum.repos.d/
hdp.repo                                                                                           100%  482   969.5KB/s   00:00    
[root@master yum.repos.d]# scp hdp.repo slave3:/etc/yum.repos.d/
hdp.repo

四、安裝ambari-server

經過不斷的安裝，有兩種模式，一種是默認postgresql數據庫的安裝方式，這種不推薦生產環境使用，還有一種方式是使用第三方數據庫的安裝方式，下面介紹兩種安裝模式，根據個人需求選擇。建議使用自帶的postgresql來配置數據庫，這樣在后面安裝過程中不會出現問題，如果使用其它數據庫，請參考其它教程來設置

1、默認安裝方式，使用默認數據庫PostgreSQL（不推薦生產環境使用）（主服務器）

（1）、安裝和配置ambari-server

[root@master yum.repos.d]# yum -y install ambari-server
[root@master yum.repos.d]# ambari-server setup
Using python  /usr/bin/python
Setup ambari-server
Checking SELinux...
SELinux status is 'disabled'
Customize user account for ambari-server daemon [y/n] (n)? n
Adjusting ambari-server permissions and ownership...
Checking firewall status...
Checking JDK...
[1] Oracle JDK 1.8 + Java Cryptography Extension (JCE) Policy Files 8
[2] Oracle JDK 1.7 + Java Cryptography Extension (JCE) Policy Files 7
[3] Custom JDK
==============================================================================
Enter choice (1): 3
WARNING: JDK must be installed on all hosts and JAVA_HOME must be valid on all hosts.
WARNING: JCE Policy files are required for configuring Kerberos security. If you plan to use Kerberos,please make sure JCE Unlimited Strength Jurisdiction Policy Files are valid on all hosts.
Path to JAVA_HOME: /usr/java/jdk1.8.0_161
Validating JDK on Ambari Server...done.
Completing setup...
Configuring database...
Enter advanced database configuration [y/n] (n)? n
Configuring database...
Default properties detected. Using built-in database.
Configuring ambari database...
Checking PostgreSQL...
Running initdb: This may take up to a minute.
Initializing database ... OK


About to start PostgreSQL
Configuring local database...
Configuring PostgreSQL...
Restarting PostgreSQL
Creating schema and user...
done.
Creating tables...
done.
Extracting system views...
ambari-admin-2.6.0.0.267.jar
...........
Adjusting ambari-server permissions and ownership...
Ambari Server 'setup' completed successfully.

（2）、啟動ambari

[root@master ~]# ambari-server start

成功啟動后在瀏覽器輸入Ambari地址：

http://192.168.12.101:8080

2、以mysql為數據庫安裝（主服務器）

（1）安裝mysql數據庫

[root@master ~]# wget http://dev.mysql.com/get/mysql-community-release-el7-5.noarch.rpm
[root@master ~]# rpm -ivh mysql-community-release-el7-5.noarch.rpm
[root@master ~]# yum install mysql-community-serve

（2）啟動mysql，設置開機啟動

[root@master ~]# service mysqld start
[root@master ~]# vi /etc/rc.local
#添加service mysqld start

（3）登錄進mysql，初始化設置root密碼

[root@master ~]# mysql -uroot 

設置登錄密碼
mysql> set password for 'root'@'localhost' = password('yourPassword');

添加遠程登錄用戶
mysql> grant all privileges on *.* to 'root'@'%' identified by 'yourPassword';

遠程登錄
#mysql -uroot -h ip(遠程的ip地址) -p

[root@master yum.repos.d]# yum -y install ambari-server

（4）登錄mysql，執行下面的語句

CREATE DATABASE ambari;  
use ambari;  
CREATE USER 'ambari'@'%' IDENTIFIED BY 'ambarizk123';  
GRANT ALL PRIVILEGES ON *.* TO 'ambari'@'%';  
CREATE USER 'ambari'@'localhost' IDENTIFIED BY 'ambarizk123';  
GRANT ALL PRIVILEGES ON *.* TO 'ambari'@'localhost';  
CREATE USER 'ambari'@'master' IDENTIFIED BY 'ambarizk123';  
GRANT ALL PRIVILEGES ON *.* TO 'ambari'@'master';  
FLUSH PRIVILEGES;  
source /var/lib/ambari-server/resources/Ambari-DDL-MySQL-CREATE.sql  
show tables;  
use mysql;  
select Host User Password from user where user='ambari';  
CREATE DATABASE hive;  
use hive;  
CREATE USER 'hive'@'%' IDENTIFIED BY 'hive';  
GRANT ALL PRIVILEGES ON *.* TO 'hive'@'%';  
CREATE USER 'hive'@'localhost' IDENTIFIED BY 'hive';  
GRANT ALL PRIVILEGES ON *.* TO 'hive'@'localhost';  
CREATE USER 'hive'@'master' IDENTIFIED BY 'hive';  
GRANT ALL PRIVILEGES ON *.* TO 'hive'@'master';  
FLUSH PRIVILEGES;  
CREATE DATABASE oozie;  
use oozie;  
CREATE USER 'oozie'@'%' IDENTIFIED BY 'oozie';  
GRANT ALL PRIVILEGES ON *.* TO 'oozie'@'%';  
CREATE USER 'oozie'@'localhost' IDENTIFIED BY 'oozie';  
GRANT ALL PRIVILEGES ON *.* TO 'oozie'@'localhost';  
CREATE USER 'oozie'@'master' IDENTIFIED BY 'oozie';  
GRANT ALL PRIVILEGES ON *.* TO 'oozie'@'master';  
FLUSH PRIVILEGES;

（5）簡歷mysql與ambari-server的連接

網上下載mysql-connector-java-5.1.40.jar放到root文件下

mkdir /usr/share/java
cp /root/mysql-connector-java-5.1.40.jar /usr/share/java/mysql-connector-java.jar
cp /usr/share/java/mysql-connector-java.jar /var/lib/ambari-server/resources/mysql-jdbc-driver.jar
vi /etc/ambari-server/conf/ambari.properties
添加server.jdbc.driver.path=/usr/share/java/mysql-connector-java.jar

（6）初始化設置ambari-server並啟動

[root@master ~]# ambari-server setup
下面是配置執行流程，按照提示操作
（1） 提示是否自定義設置。輸入：y
Customize user account for ambari-server daemon [y/n] (n)? y
（2）ambari-server 賬號。
Enter user account for ambari-server daemon (root):
如果直接回車就是默認選擇root用戶
如果輸入已經創建的用戶就會顯示：
Enter user account for ambari-server daemon (root):ambari
Adjusting ambari-server permissions and ownership...
（3）檢查防火牆是否關閉
Adjusting ambari-server permissions and ownership...
Checking firewall...
WARNING: iptables is running. Confirm the necessary Ambari ports are accessible. Refer to the Ambari documentation for more details on ports.
OK to continue [y/n] (y)?
直接回車
（4）設置JDK。輸入：3
Checking JDK...
Do you want to change Oracle JDK [y/n] (n)? y
[1] Oracle JDK 1.8 + Java Cryptography Extension (JCE) Policy Files 8
[2] Oracle JDK 1.7 + Java Cryptography Extension (JCE) Policy Files 7
[3] Custom JDK
==============================================================================
Enter choice (1): 3
如果上面選擇3自定義JDK,則需要設置JAVA_HOME。輸入：/usr/java/jdk1.8.0_161
WARNING: JDK must be installed on all hosts and JAVA_HOME must be valid on all hosts.
WARNING: JCE Policy files are required for configuring Kerberos security. If you plan to use Kerberos,please make sure JCE Unlimited Strength Jurisdiction Policy Files are valid on all hosts.
Path to JAVA_HOME: /usr/java/jdk1.8.0_131
Validating JDK on Ambari Server...done.
Completing setup...
（5）數據庫配置。選擇：y
Configuring database...
Enter advanced database configuration [y/n] (n)? y
（6）選擇數據庫類型。輸入：3
Configuring database...
==============================================================================
Choose one of the following options:
[1] - PostgreSQL (Embedded)
[2] - Oracle
[3] - MySQL
[4] - PostgreSQL
[5] - Microsoft SQL Server (Tech Preview)
[6] - SQL Anywhere
==============================================================================
Enter choice (3): 3
（7）設置數據庫的具體配置信息，根據實際情況輸入，如果和括號內相同，則可以直接回車。如果想重命名，就輸入。
Hostname (localhost):
Port (3306):
Database name (ambari):
Username (ambari):
Enter Database Password (bigdata):ambarizk123
Re-Enter password: ambarizk123
（8）將Ambari數據庫腳本導入到數據庫
WARNING: Before starting Ambari Server, you must run the following DDL against the database to create the schema: /var/lib/ambari-server/resources/Ambari-DDL-MySQL-CREATE.sql 
Proceed with configuring remote database connection properties [y/n] (y)?

[root@master ~]# ambari-server start

3、錯誤處理

　　如果出現錯誤，請注意查看日志，根據具體的錯誤內容進行處理，默認ambari-server的日志在/var/log/ambari-server/ambari-server.log里面。如果在處理日志的過程中或者后面安裝的過程中出現一些莫名的錯誤，可以重置的安裝。如果上面進行的默認數據庫的配置，可以使用下面的代碼重置ambari-server

[root@master ~]# ambari-server stop
[root@master ~]# ambari-server reset
[root@master ~]# ambari-server setup

　　如果選擇的是第二種方式，就需要先執行上面的語句，然后手動將mysql里面創建的數據庫進行刪除。然后再重新執行第二步的操作

[root@master ~]# mysql -uroot -p
mysql> show databases;
+--------------------+
| Database           |
+--------------------+
| information_schema |
| ambari             |
| hive               |
| oozie              |
| performance_schema |
+--------------------+
5 rows in set (0.00 sec)
mysql> drop database ambari;
mysql> drop database hive;
mysql> drop database oozie;

　　如果在安裝的過程中出現了錯誤，又想重新安裝，可以在ambari-server開啟的情況下，執行下面的語句來移除已安裝的包，然后再通過不同的情況選擇上面兩種方式的一種對ambari-server進行重置

python /usr/lib/python2.6/site-packages/ambari_agent/HostCleanup.py --silent

五、安裝配置部署HDP集群

1、登錄

登錄界面，默認管理員賬戶登錄，賬戶：admin 密碼：admin

2、安裝向導

（1）配置集群的名字為hadoop

（2）選擇版本並修改為本地源地址

（3）安裝配置

選擇要安裝的服務器和上傳上面教程所拷貝出來的秘鑰文件id_rsa

（4）安裝ambari的agent，同時檢查系統問題

如果這里出了問題，請檢查上面所有的步驟有沒有遺漏和未設置的參數。同時在重新修改了配置以后，最好是重置ambari-server來重新進行安裝

[root@master ~]# # ambari-server stop    
[root@master ~]# # ambari-server reset   #重置命令
[root@master ~]# # ambari-server setup   #重新設置
[root@master ~]# # ambari-server start

（5）選擇要安裝的服務

（6）選擇分配服務

（7）選擇

建議nodemanager、regionserver、client全都勾選上，第一個datanode根據主機的磁盤容量選擇。

（8）根據提示修改一些錯誤，注意hive和oozie的數據庫配置問題。如果最開始初始化ambari-server的時候使用的是默認配置，這里就最好使用new的方式，如果使用的是New MySQL Database ，這需要選擇Existing MySQL / MariaDB Database ，然后測試一下是否能連接上

（9）接下來就是安裝了，如果通過了最好，沒有通過需要排查日志，看具體哪個地方出錯。如果實在處理不了一些問題，可以根據上面的錯誤處理進行重置安裝。

免責聲明！

本站轉載的文章為個人學習借鑒使用，本站對版權不負任何法律責任。如果侵犯了您的隱私權益，請聯系本站郵箱yoyou2525@163.com刪除。

猜您在找 hadoop-hdp-ambari離線安裝記錄 Ambari+HDP+HDF離線安裝包下載清單基於Centos7.6上Ambari2.7.4+HDP3.1.4離線安裝 ambari2.7.3離線安裝hdp3.1.0時，ambari-hdp-1.repo中baseurl無值 ambari 安裝報錯：/usr/bin/hdp-select: No such file or directory 2、ambari搭建HDP集群基於【CentOS-7+ Ambari 2.7.0 + HDP 3.0】搭建HAWQ數據倉庫02 ——使用ambari-server安裝HDP Ambari對HDP的版本支持列表 centos7.2.1511 ambari2.6.1.0全離線安裝 Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

Ambari2.6.0 安裝HDP2.6.3（離線安裝）

一、下載安裝包

二、系統環境配置

1、安裝jdk（所有機器）

（1）安裝openjdk

（2）下載oracle

（3）卸載OpenJDK

（4）安裝下載好的jdk

2、修改本機名（所有機器）

3、修改/etc/hosts文件（所有機器）

4、修改/etc/sysconfig/network（所有機器）

5、修改文件打開限制（所有機器）

6、關閉防火牆（所有機器）

7、同步時鍾

（1）安裝ntp服務（所有機器）

（2）設置master為主服務器，開啟nptd服務(主服務器)

(3)、子節點設置同步（子節點）

8、SSH無密碼登陸（主節點）

9、其他系統設置 （所有機器）

三、修改yum源，實現離線安裝

1、安裝httpd服務（主服務器）

2、將上面下載的三個包放到/var/www/html目錄下（主服務器）

3、制作本地源

（1）安裝本地源制作相關工具（主服務器）

（2）修改文件里面的源地址（主服務器）

（3）將創建好的文件拷貝到子節點（主服務器）

四、安裝ambari-server

1、默認安裝方式，使用默認數據庫PostgreSQL（不推薦生產環境使用）（主服務器）

（1）、安裝和配置ambari-server

（2）、啟動ambari

2、以mysql為數據庫安裝（主服務器）

（1）安裝mysql數據庫

（2）啟動mysql，設置開機啟動

（3）登錄進mysql，初始化設置root密碼

（4）登錄mysql，執行下面的語句

（5）簡歷mysql與ambari-server的連接

（6）初始化設置ambari-server並啟動

3、錯誤處理

五、安裝配置部署HDP集群

1、登錄

2、安裝向導

（1）配置集群的名字為hadoop

（2）選擇版本並修改為本地源地址

（3）安裝配置

（4）安裝ambari的agent，同時檢查系統問題

（5）選擇要安裝的服務

（6）選擇分配服務

（7）選擇

（9）接下來就是安裝了，如果通過了最好，沒有通過需要排查日志，看具體哪個地方出錯。如果實在處理不了一些問題，可以根據上面的錯誤處理進行重置安裝。

免責聲明！

　4、修改/etc/sysconfig/network（所有機器）

9、其他系統設置（所有機器）