开发者社区 问答 正文

hadoop中什么是DistCp呢?

hadoop中什么是DistCp呢?

展开
收起
游客yzrzs5mf6j7yy 2021-12-06 00:12:01 297 分享 版权
1 条回答
写回答
取消 提交回答
  •  DistCp(分布式拷贝)是用于大规模集群内部和集群之间拷贝的工具。它使用Map/Reduce实现文件分发,错误处理和恢复,以及报告生成。它把文件和目录的列表作为map任务的输入,每个任务会完成源列表中部分文件的拷贝。由于使用了Map/Reduce方法,这个工具在语义和执行上都会有特殊的地方。

    2021-12-06 00:12:15
    赞同 展开评论
问答分类:
问答标签:
问答地址: