大數據(九)Hadoop Windows開發環境搭建


1、解壓Hadoop安裝包、源碼包

 

2、新建一個文件夾用於存放jar包

 

3、將hadoop-2.6.5\share\hadoop下的所有jar包拷貝到新建的文件夾中

4、配置環境變量,將Hadoop安裝包解壓路徑配置到環境變量中

 加入到PATH中

 再配置一條HADOOP_USER_NAME

 

5、替換安裝包目錄下bin目錄的文件

 替換文件https://pan.baidu.com/s/1EV7FfbZ5Hk-5lrp-9KpYpg

6、將bin目錄下的hadoop.dll文件拷貝到C:\Windows\System32

7、安裝eclipse mars.2后,將hadoop-eclipse-plugin-2.6.0插件拷貝到eclipse安裝目錄的plugis目錄下

8、打開eclipse,window>preferences>hadoop map/reduce 將路徑設置為hadoop安裝路徑

 

9、在map/reduce locations窗口下新建一個連接

 

 

10、window>preferences>java>buid path>user libraries,new一個library。

 

11、點擊add external jars,將之前拷貝出來的jar包全部導入

 

12、在項目中右鍵>build path>configure build path>libraries>add library>user library,選擇上一步創建的library。

13、將運行的Hadoop集群中的hdfs-site.xml、core-site.xml、mapred-site.xml、yarn-site.xml放到項目的src目錄下

 


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM