开发者社区> 问答> 正文

E-MapReduce如何创建任务流

流云灬小猴 2017-03-21 09:07:25 1116

比如在oss中我有3个jar包,第一个为求数据条数,第二个求和,第三个除法
我现在想求平均值,那就是求条数,求和,然后相除,用Java代码创建job

实际上就是java中创建2个job,第一的输出当作第二个的输入,并且不能第一个的输出先存到oss中,第二个再去读

Java 对象存储
分享到
取消 提交回答
全部回答(1)
  • 梅熙
    2019-07-17 20:57:02

    你好,emr中有作业和执行计划的概念。如果你的中间结果落到集群上或者oss上,可以创建多个job, 设置依赖关系。如果你的中间结果不落地,直接把这两步计算写在一份代码里面,使用一个job就可以完成了。具体问题, 可以加入emr客户群交钉钉流,一般由专人值班回答客户咨询。
    1075534903

    1 0
+ 订阅

时时分享云计算技术内容,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。

推荐文章
相似问题