hadoop 集群间数据迁移
2012-04-01 11:23
162 查看
hadoop集群之间有时候需要将数据进行迁移,如将一些保存的过期文档放置在一个小集群中进行保存。
使用的是社区提供的功能,distcp。用法非常简单:
hadoop distcp hdfs://nn1:8020/foo/bar hdfs://nn2:8020/bar/foo
加上参数 -i 表示不用去管failure -m 设置map数
使用的是社区提供的功能,distcp。用法非常简单:
hadoop distcp hdfs://nn1:8020/foo/bar hdfs://nn2:8020/bar/foo
加上参数 -i 表示不用去管failure -m 设置map数
相关文章推荐
- hadoop集群间数据迁移
- hadoop 集群间数据迁移
- hadoop集群数据迁移
- Hadoop集群间HBase数据迁移
- hadoop集群间的hbase数据迁移
- (转)hadoop 集群间数据迁移
- Hadoop集群磁盘数据迁移
- Hadoop集群安装
- Hadoop集群系列7:WordCount运行详解
- hadoop2.7.2集群运行HQL时,异常Job Submission failed with exception 'org.apache.hadoop.ipc.RemoteException
- Hadoop2.2.0 CentOS 32/64位 集群配置
- hadoop完全分布式集群搭建全部流程之一:hadoop和java安装
- 大数据教程(四)—— Hadoop集群VSFTP和SecureCRT安装配置
- Hive之 hive-1.2.1 + hadoop 2.7.4 集群安装
- hadoop集群配置实例
- 百度的Hadoop分布式大数据系统图解:4000节点集群
- linux系统上搭建Hadoop2.6分布式集群
- Hadoop三节点分布式集群搭建(基于openstack)
- 从零自学Hadoop(16):Hive数据导入导出,集群数据迁移上