Hadoop-MyEclipse安裝配置


配置環境:Hadoop-1.2.1,MyEclipse,Centos6.5

網站上有很多關於Hadoop-eclipse的安裝配置信息,但很少有講到關於怎么在MyEclipse上配置Hadoop的相關操作。由於我的電腦只裝了MyEclipse,所以我在這里將如何用MyEclipse安裝Hadoop-eclipse插件記錄下來。其實跟在eclipse上配置是大同小異的。

步驟:

1)將Hadoop-eclipse-Plugin-1.2.1.jar放到MyEclipse安裝目錄的dropins文件夾下,重新啟動MyEclipse。會發現在Project Explorer下出現DFS Locations.表明MyEclipse已經識別Hadoop-eclipse-Plugin-1.2.1.jar插件。

注意:Hadoop-eclipse-Plugin-1.2.1.jar這個jar包在Hadoop-1.2.1的contrib目錄下是找不到的,需要自己在網上下載,或者自己配置也行。

2)打開window-->Preferens,發現Hadoop Map/Reduce選項,說明插件安裝成功,配置Hadoop installation directory為本地Hadoop安裝解壓的目錄。(注意:前提是要在window下下載Hadoop-1.2.1,並解壓)

 

3)選擇window-->show view-->others,選擇有大象圖標的Map/Reduce,打開Map/Reduce的開發環境,下方多了一個Map/Reduce Location的框。

圖中出現的大象linux是我已經配好了的。

4)選擇Map/reduce Location標簽,點擊標簽最右邊的大象圖標,即齒輪圖標右側的大象圖標,打開參數設置頁面。

 

注意:用紅色框標注的參數設置一定要正確,首先,Location name設置為linux的主機名,可以用hostname查看。Host為linux主機用戶名。左邊的PortMapReduce的端口號,之前在linux下配置Hadoop的xml文件已經配過了,按照配置的端口號配置就可以了。右邊的為hdfs的端口號。配置完后點finish。

5)接着點擊Advanced parameters,從中找到hadoop.tmp.dir,修改為Hadoop集群core-site.xml中配置的值。

6)接着在Advanced parameters中配置dfs.permssions,修改為false,與Hadoop集群【hdfs-site.xml】中配置的一致;將dfs.replication的值改為1.

其實,這些配置信息的設置都可以參考http://linux.chaofn.org:50030/jobhistoryhome.jsp中紅色框中的內容進行配置

7)配置完成后,若在Project Explorer中出現如下信息,這表明配置成功

 


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM