开发者社区 > 大数据与机器学习 > 开源大数据平台 E-MapReduce > 正文

JindoDistCp是什么?

JindoDistCp是什么?

展开
收起
Lee_tianbai 2021-01-07 15:52:45 857 0
1 条回答
写回答
取消 提交回答
  • JindoDistCp 是一个简单易用的分布式文件拷贝工具,目前主要用在 E-Mapreduce 集群内,主要提供 HDFS 和 S3 到 OSS 的数据迁移服务,相比于 HadoopDistCp 和 S3DistCp,JindoDistCp 做了很多优化以及新增了许多个性化功能,并且深度结合 OSS 对象存储的特性,定制化 CopyCommitter,实现 No-Rename 拷贝,大大缩短离线数据 入湖迁移时间消耗。

    2021-01-08 15:47:21
    赞同 展开评论 打赏

阿里云EMR是云原生开源大数据平台,为客户提供简单易集成的Hadoop、Hive、Spark、Flink、Presto、ClickHouse、StarRocks、Delta、Hudi等开源大数据计算和存储引擎,计算资源可以根据业务的需要调整。EMR可以部署在阿里云公有云的ECS和ACK平台。

相关电子书

更多
低代码开发师(初级)实战教程 立即下载
冬季实战营第三期:MySQL数据库进阶实战 立即下载
阿里巴巴DevOps 最佳实践手册 立即下载