开发者社区> 问答> 正文

HDFS的 DistCp是什么意思?

HDFS的 DistCp是什么意思?

展开
收起
游客fbdr25iajcjto 2021-12-09 19:19:11 469 0
1 条回答
写回答
取消 提交回答
  • DistCp(分布式拷贝):

    是用于大规模集群内部和集群之间拷贝的工具。

    它使用 Map/Reduce 实现文件分发,错误处理和恢复,以及报告生成。它把文件和目录的列表作为 map 任务的输入,每个任务会完成源列表中部分文件的拷贝。

    2021-12-09 19:19:55
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
海量数据分布式存储——Apache HDFS之最新进展 立即下载
HDFS optimization for Hbase At XiaoMi 立即下载
HDFS optimization for HBase at XiaoMi 立即下载