阿里云创建E-MapReduce 4 创建执行计划

简介: 创建完作业后,若要让定义的作业到集群上运行,就需要创建一个执行计划。一个执行计划可以包含多个作业,用户也可自定义其先后顺序。例如,假设用户的一个场景是:产生数据 -> 处理数据 -> 清理数据,则用户可以分别定义三个名为“prepare-data”、“process-data”和“cleanup-data”的作业,然后创建一个执行计划来包含这三个作业。

创建完作业后,若要让定义的作业到集群上运行,就需要创建一个执行计划。一个执行计划可以包含多个作业,用户也可自定义其先后顺序。例如,假设用户的一个场景是:产生数据 -> 处理数据 -> 清理数据,则用户可以分别定义三个名为“prepare-data”、“process-data”和“cleanup-data”的作业,然后创建一个执行计划来包含这三个作业。

1.创建执行计划的步骤如下:

2.登录阿里云 E-MapReduce 控制台执行计划页面。

3.选择地域(Region)。

4.单击右上角的创建执行计划,进入创建执行计划页面。

5.在选择集群方式页面上,有两个选项,分别是“按需创建”和“已有集群”。其中“按需创建”表示目前用户还没有集群,打算用一个临时集群运行该执行计划,并在运行完后将该临时集群自动释放。而“已有集群”表示用户目前已有集群在运行,该执行计划要提交到已有集群中运行。

如果选择“按需创建”,则步骤跟创建集群一样进行,选择完这个按需集群的配置以后确定即可。

如果选择“已有集群”,则进入选择集群页面。用户可选择要将该执行计划关联到的集群,如下图所示:

screenshot

6.单击下一步,进入到配置作业页面。在该页面中,左边为先前已经定义好的作业列表,右边是该新创建的执行计划要运行的作业列表。将左边的作业按照执行顺序选择到右边,即可完成执行计划的定义。可以单击问号,查看作业的详细参数。完成后,单击下一步。如下图所示:


screenshot

7.设置执行计划名称。

8.选择调度策略,如下图所示。

周期调度,定义周期调度的频率与启动调度的时间。

手动执行,只有在用户手动单击的情况下才会执行。

screenshot

9.单击确认提交,完成执行计划的创建。

相关文章
|
10月前
|
SQL
在阿里云的E-MapReduce中,对数组类型进行聚合操作需要使用特定的函数
在阿里云的E-MapReduce中,对数组类型进行聚合操作需要使用特定的函数
45 2
|
SQL 弹性计算 分布式计算
阿里云开源大数据平台E-MapReduce 产品新动态及开源大数据前沿技术分享 2023-2月刊
开源大数据平台 EMR 产品技术月刊,涵盖本月技术速递、产品和功能发布、市场和客户应用实践等内容,帮助您快速了解开源大数据最新动态。
10144 8
阿里云开源大数据平台E-MapReduce 产品新动态及开源大数据前沿技术分享 2023-2月刊
|
大数据
《阿里云产品手册2022-2023 版》——开源大数据平台 E-MapReduce
《阿里云产品手册2022-2023 版》——开源大数据平台 E-MapReduce
阿里云ACE×E-MapReduce 数据湖 Meetup 上海站来啦!
8月7日,阿里云E-MapReduce数据湖Meetup上海站来啦!本场Meetup由阿里云E-MapReduce与阿里ACE同城会联合举办。此次Meetup,社区邀请了来自阿里巴巴、intel、cloudera的7位资深技术专家,分享了超多关于云原生数据湖的内容,全方位解析数据湖治理等难题,以及正式启动E-MapReduce极客挑战赛。
312 0
阿里云ACE×E-MapReduce 数据湖 Meetup 上海站来啦!
|
Web App开发 SQL 大数据
阿里云AnalyticDB数据导出到E-MapReduce实践
阿里云的分析型数据库(AnalyticDB)和E-MapReduce(简称EMR)在大数据场景下非常有用,本文将介绍如何尝试打通两个产品,将通过EMR中自带的开源工具Sqoop来完成这个任务。
4372 0