HDFS中兩個集群數據文件拷貝的方式


在不同的兩個HDFS集群中拷貝數據,我們可以使用distcp,集群之間拷貝數據的正確姿勢是:
hadoop distcp hdfs://master1:9999/foo/bar hdfs://master2:9999/bar/foo
上面的意思是將集群master1上的文件foo/bar拷貝到master2集群上的bar/foo目錄下
hadoop distcp hdfs://master1:9999/foo/a hdfs://master1:9999/foo/b hdfs://master2:9999/bar/foo
上面的意思是將master1集群上的兩個文件foo/afoo/b拷貝到master2集群上的文件bar/foo中去
詳細參考Hadoop的官網:http://hadoop.apache.org/docs/r2.7.5/hadoop-distcp/DistCp.html


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM