hadoop distcp hftp hdfs跨集群拷贝常见问题归总

  在工作中遇到部门间数据合作，需跨不同版本集群拷贝数据，从hadoop 2.6.0-cdh5.7.0 拷贝数据到hadoop 2.7.1， 记录所碰到的问题及解决方案。 distcp基础用法 比如拷贝A集群（src集群）的A1目录到B集群（dest集群）的B1目录， 1.同版本集群拷贝（hdfs协议）： 在dest集群（目标集群）运行命令： hadoop distcp  hdfs://10.19

>>阅读原文<<