HDFS中两个集群数据文件拷贝的方式


在不同的两个HDFS集群中拷贝数据,我们可以使用distcp,集群之间拷贝数据的正确姿势是:
hadoop distcp hdfs://master1:9999/foo/bar hdfs://master2:9999/bar/foo
上面的意思是将集群master1上的文件foo/bar拷贝到master2集群上的bar/foo目录下
hadoop distcp hdfs://master1:9999/foo/a hdfs://master1:9999/foo/b hdfs://master2:9999/bar/foo
上面的意思是将master1集群上的两个文件foo/afoo/b拷贝到master2集群上的文件bar/foo中去
详细参考Hadoop的官网:http://hadoop.apache.org/docs/r2.7.5/hadoop-distcp/DistCp.html


免责声明!

本站转载的文章为个人学习借鉴使用,本站对版权不负任何法律责任。如果侵犯了您的隐私权益,请联系本站邮箱yoyou2525@163.com删除。



 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM