linux下安裝配置Hadoop(單機版安裝)


單機版安裝

1,環境准備:修改虛擬機ip名稱,主機名稱,關閉防火牆

修改虛擬機 ip

首先查看IP    命令: ifconfig

 

 

把ip地址配置到host配置文件中(主機ip+主機名稱)命令:vi /etc/hosts

 

 

修改主機名稱有兩種方式

1)臨時修改   命令 : hostname  hadoop (hostname+主機名,臨時修改的到系統重啟時,修改的主機名失效)

2)永久修改:修改配置文件   命令:vi /etc/hosts,在文件末端寫入如下命令

 

 

查看當前主機名   命令:hostname

關閉防火牆(這里可以暫時不關,防止節點間通信出現問題)

2、安裝Hadoop

解壓安裝包 命令:tar -zxvf ./hadoop-2.7.3.tar-1.gz -C /usr/local  (tar -zxvf ./壓縮包名稱  -C+解壓到的路徑)

解壓后可以查看hadoop所在地

 

 進入Hadoop-2.7.3目錄查看更多文件內容 (命令:ll ./bin   bin目錄為二進制可執行文件    命令: ll ./etc     etc目錄下為軟件的配置文件   命令: ll ./sbin   sbin目錄是關於Hadoop啟停的目錄   命令: ll ./share   share目錄有doc使用文檔,hadoop各個模塊編譯后的jar包所在目錄

3、更改配置文件

為了操作便捷把解壓名改為hadoop,查詢hadoop的路勁

 

 修改配置文件   命令:vim /etc/profile進入文件      在文件末端修改內容如下

 

 保存退出,然后執行source  /etc/profile   修改生效

查看是否配置成功 命令:hadoop  version   可以看到hadoop版本

 

 

4、配置hadoop-env.sh文件

由於Hadoop是基於Java編寫的,在jdk中運行,所以要配置好jdk的路徑,然后用 Hadoop  version 測試即可。

命令: vi ./etc/hadoop/hadoop-env.sh  打開這個文件添上下面這句話(注:是把${JAVA_HOME}改為你安裝的jdk的路徑,)

 

 

5、修改權限

查看hadoop的屬主和屬組   命令 :  cd /usr/local   然后  ll

為Hadoop創建一個單獨的用戶,以便將Hadoop文件系統與Unix文件系統隔離。命令

命令: chown -R xxx:xxx /usr/local/hadoop-2.7.3/    (可以看到權限改為lyt了)

 

注意:
單機版hadoop會將linux文件系統當做hdfs,查看根目錄
命令:[root@hadoop01 hadoop-2.7.3]# hdfs dfs -ls /

 

 


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM