win10下安裝Hadoop快速搞定——親測有效


參考博客:https://blog.csdn.net/qq_35535690/article/details/81976032

 

要開學上大數據Hadoop啦,可是老師推薦CentOS7。。。不習慣用虛擬機和這個系統,只好自己摸索着在win10里弄一個,按照下面的步驟,分分鍾解決問題。

 

1.首先到官方下載官網的hadoop2.7.7,鏈接如下
https://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/

 

 

 

2.找網盤的hadooponwindows-master.zip
鏈接: https://pan.baidu.com/s/1ooGzSNYnuPS8KFlmd0xqMA  提取碼: k15t

把hadoop-2.7.7.tar.gz解壓后(我是解壓在G盤)
使用hadooponwindows-master的bin和etc替換hadoop2.7.7的bin和etc

 

3.下載配置JAVA_HOME並檢查是否成功

 

 

 

 

 

 

 

5.配置HADOOP_HOME,path添加%HADOOP_HOME%\bin(win10不用分號或者如下編輯界面不用分號,其余加上 ;) 

 

 

 

6.使用編輯器打開E:\Hadoop2.7.7\hadoop-2.7.7\etc\hadoop\hadoop-env.cmd
修改JAVA_HOME的路徑
把set JAVA_HOME改為jdk的位置
注意其中PROGRA~1代表Program Files
set JAVA_HOME=E:\java\jdk1.8.0_201

 

 

 

7.打開 hadoop-2.7.7/etc/hadoop/hdfs-site.xml
修改路徑為hadoop下的namenode和datanode

 

<configuration>
 <property>
        <name>dfs.replication</name>
        <value>1</value>
    </property>
    <property>
        <name>dfs.namenode.name.dir</name>
        <value>/G:/hadoop-2.7.7/data/namenode</value>
    </property>
    <property>
        <name>dfs.datanode.data.dir</name>
        <value>/G:/hadoop-2.7.7/data/datanode</value>
    </property>
</configuration>

 

 

 

 

8.在G:\hadoop-2.7.7目錄下 添加tmp文件夾
在G:\hadoop-2.7.7/添加data和namenode,datanode子文件夾

 

 

 

 

10.把hadoop.dll(從)拷貝到 C:\Windows\System32 ,不然在window平台使用MapReduce測試時報錯

 

11.以管理員身份打開命令提示符
輸入hdfs namenode -format,看到如下所示就說明format成功

 

 

12.轉到Hadoop-2.7.3\sbin文件下

輸入start-all,啟動hadoop集群

出現下面四個窗口表示啟動hadoop集群成功

 

 

 

13.輸入jps - 可以查看運行的所有節點

 

 

 

訪問http://localhost:50070,訪問hadoop的web界面

訪問http://localhost:8088,訪問yarn的web界面,有就表明已經成功

 

 

補充:停止運行的所有節點的命令為

 


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM