[轉] 查看HDFS文件系統數據的三種方法


1、使用插件——Hadoop-Eclipse-Plugin
此方法需要借助Eclipse,插件的安裝及使用請參考博文使用Eclipse編譯運行MapReduce程序_Hadoop2.6.0_Ubuntu/CentOS
借助Eclipse只能進行簡單的HDFS操作,如查看,刪除,上傳,下載。以下是操作界面:
插件界面
2、HDFS Web界面
HDFS Web界面上只能查看文件系統數據。網址:http://localhost:50070
界面如下:
web界面
執行完WordCount程序后可以到本界面上下載output結果並查看,如圖:
Hadoop web界面查看文件系統數據
3、 shell命令
這個方法是最基本的,能進行所有文件操作。

 
         
  1. hadoop fs -ls /user/hadoop/output #查看指定目錄下的文件和文件夾。/user/hadoop/output是HDFS上的目錄,不是本地目錄
  2. hadoop fs -cat /user/hadoop/output #查看文件內容
Shell 命令

博主的用戶名是dblab,相應的HDFS上的目錄變為/user/dblab/output。界面截圖如下:
shell


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM