? ? hadoop集群之間有時候需要將數據進行遷移,如將一些保存的過期文檔放置在一個小集群中進行保存。
? ? 使用的是社區提供的功能,distcp。用法非常簡單:
? ??hadoop distcp hdfs://nn1:8020/foo/bar ?hdfs://nn2:8020/bar/foo
? ? 加上參數 -i 表示不用去管failure -m 設置map數
? ? hadoop集群之間有時候需要將數據進行遷移,如將一些保存的過期文檔放置在一個小集群中進行保存。
? ? 使用的是社區提供的功能,distcp。用法非常簡單:
? ??hadoop distcp hdfs://nn1:8020/foo/bar ?hdfs://nn2:8020/bar/foo
? ? 加上參數 -i 表示不用去管failure -m 設置map數
轉載于:https://www.cnblogs.com/sidmeng/archive/2012/04/01/2428283.html
版权声明:本站所有资料均为网友推荐收集整理而来,仅供学习和研究交流使用。
工作时间:8:00-18:00
客服电话
电子邮件
admin@qq.com
扫码二维码
获取最新动态