开发者社区 问答 正文

HDFS中命令行接口distcp是什么?

HDFS中命令行接口distcp是什么?

展开
收起
真的很搞笑 2021-12-05 16:34:08 301 分享 版权
1 条回答
写回答
取消 提交回答
  • hadoop distcp

    分布式拷贝(DistCp)是用于大规模集群内部和集群之间拷贝的工具 它使用Map/Reduce实现文件分发、错误处理和恢复以及报告生成 它把文件和目录的列表作为Map任务的输入,每个任务会完成源列表中部分文件的拷贝 由于使用了Map/Reduce方法,这个工具在语义和执行上都会有特殊的地方
    2021-12-05 16:34:22
    赞同 展开评论