开发者社区 > 大数据与机器学习 > 开源大数据平台 E-MapReduce > 正文

阿里云E-MapReduce 还需要搭建Hadoop环境吗?

阿里云E-MapReduce flume通过jindosdk写入oss的话,还需要搭建Hadoop环境吗?

展开
收起
cuicuicuic 2023-11-12 09:21:14 59 0
1 条回答
写回答
取消 提交回答
  • 不需要hadoop环境,但是因为要用到flume里的hdfs sink,所以$FLUME_HOME/lib下要有hadoop-common的依赖可以参考这个
    b5ea44750ff6b0f571f22a9e5e082ee0.png
    https://developer.aliyun.com/article/784472 ,此回答整理自钉群“JindoData 用户交流群”

    2023-11-12 17:38:29
    赞同 展开评论 打赏

阿里云EMR是云原生开源大数据平台,为客户提供简单易集成的Hadoop、Hive、Spark、Flink、Presto、ClickHouse、StarRocks、Delta、Hudi等开源大数据计算和存储引擎,计算资源可以根据业务的需要调整。EMR可以部署在阿里云公有云的ECS和ACK平台。

相关电子书

更多
《构建Hadoop生态批流一体的实时数仓》 立即下载
零基础实现hadoop 迁移 MaxCompute 之 数据 立即下载
CIO 指南:如何在SAP软件架构中使用Hadoop 立即下载