Hadoop的安裝與配置

1 安裝JDK

官網：https://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html

鏡像：https://repo.huaweicloud.com/java/jdk/

• 首先下載jdk linux安裝包 jdk-11_linux-x64_bin.tar.gz

• 上傳到linux服務器

• jdk解壓

• 修改jdk文件夾名

• 修改配置文件

#上傳文件
rz -E 選擇文件上傳到服務器
#解壓文件
tar -xzvf jdk-11_linux-x64_bin.tar.gz -C /usr/local
#修改文件名
mv jdk-11/ jdk
#修改配置
vim /etc/profile
...
export JAVA_HOME=/usr/local/jdk
export PATH=$PATH:$JAVA_HOME/bin:
export CLASSPATH=$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar
#立刻使配置生效
source /etc/profile

2 安裝hadoop

官網: <http://hadoop.apache.org/releases.html

• 下載hadoop二進制安裝包

• 上傳到服務器

• 解壓

• 修改文件名

• 修改配置

• 激活配置

#上傳文件
rz -E 選擇文件上傳到服務器
#解壓文件
tar -xzvf hadoop-3.2.1.tar.gz -C /usr/local
#修改文件名
mv hadoop-3.2.1/ hadoop
#修改配置
vim /etc/profile
...
export JAVA_HOME=/usr/local/jdk
export HADOOP_HOME=/usr/local/hadoop
export PATH=$PATH:$JAVA_HOME/bin:$HADOOP_HOME/bin:$HADOOP_HOME/sbin:
export CLASSPATH=$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar
#立刻使配置生效
source /etc/profile

# 修改hadoop配置文件jdk
vim /usr/local/hadoop/etc/hadoop/hadoop-env.sh
52 # The java implementation to use. By default, this environment
53 # variable is REQUIRED on ALL platforms except OS X!
54 export JAVA_HOME=/usr/local/jdk