开发者社区> 问答> 正文

E-MapReduce如何创建任务流

比如在oss中我有3个jar包,第一个为求数据条数,第二个求和,第三个除法
我现在想求平均值,那就是求条数,求和,然后相除,用Java代码创建job

实际上就是java中创建2个job,第一的输出当作第二个的输入,并且不能第一个的输出先存到oss中,第二个再去读

展开
收起
流云灬小猴 2017-03-21 09:07:25 3493 0
1 条回答
写回答
取消 提交回答
  • 你好,emr中有作业和执行计划的概念。如果你的中间结果落到集群上或者oss上,可以创建多个job, 设置依赖关系。如果你的中间结果不落地,直接把这两步计算写在一份代码里面,使用一个job就可以完成了。具体问题, 可以加入emr客户群交钉钉流,一般由专人值班回答客户咨询。
    1075534903

    2019-07-17 20:57:02
    赞同 1 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
阿里云E-MapReduce 立即下载
大数据解决方案构建详解 以阿里云E-MapReduce为例 立即下载
《E-MapReduce on ACK 全新发布,助力企业高效构建大数据平台》 立即下载