备案控制台
探索云世界
开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

在创建 DataWorks 作业时EMR是如何发挥作用的？

在创建 DataWorks 作业时EMR是如何发挥作用的？

展开
收起
甜甜的嘻嘻嘻 2022-08-03 16:11:31 377 0
1 条回答
写回答
取消 提交回答
  • 小羊桃桃冰

    用户在创建 DataWorks 作业时，可以将作业运行在一个已经存在的 Hadoop 集群上。在写的时候只要相应的输入 accessKey 和 accessID，输入 EMR 的集群 id，则可以将这个任务调度到 EMR 集群上。

    以上内容摘自《大数据工程师必读手册》电子书，点击https://developer.aliyun.com/topic/download?id=29可下载完整版

    2022-08-03 16:31:26
    赞同 展开评论 打赏
问答分类：
DataWorks 大数据开发治理平台 DataWorks
问答标签：
大数据开发治理平台 DataWorks emr 大数据开发治理平台 DataWorks作业 emr dataworks 大数据开发治理平台 DataWorks创建
问答地址：
开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 问答
相关产品：
大数据开发治理平台 DataWorks

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

相关问答
DataWorks
dataworks作业运行超过10天才报timeout的原因是什么？
36
1
0
dataworks注册EMR有API吗？
36
1
0
DataWorks这个有办法可以把已经完成的作业批量导出成文件么？
48
2
0
DataWorks中emr on dataworks是不是有问题？
6
0
0
dataworks + CDP集群 能运行pySpark作业吗?
15
1
0
DataWorks从maxcomputer作业运维里面任务的logview点进去这个权限是在哪里开？
15
1
0
DataWorks从集成那批量建作业同步数据的，又没有办法批量改呀？
18
1
0
dataworks项目空间的资源组变更，同步作业全部需要重新配置吗？
18
1
0
DataWorks中ODDS Spark链接EMR Starrocks报链接超时该如何处理？
14
1
0
DataWorks作业失败，怎么回事？
23
1
0
大数据与机器学习

大数据开发治理DataWorks

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎，为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

我要提问

相关产品

  • 大数据开发治理平台 DataWorks
    文档详情 产品详情

    • 热门讨论

    热门文章

  • 数据服务报429请求次数过多咋办呀
    1061
  • dataworks可以直接消费RabbitMQ的消息吗？
    223
  • DataWorks我该如何访问A项目安装了项目的package资源？
    443
  • DataWorks生产节点今天总报：FAILED: 重跑就又可以？
    485
  • DataWorks可否产品手册操作手册下载地址？
    36
  • 数据来源：com.alibaba.fastjson.JSONException: syntax er
    3087
  • DataWorks读取polarDB FOR mysql的binlog，是否会对数据库产生压力？
    31
  • DataWorks怎么转交责任人？
    30
  • DataWorks实时同步速率和并发设置怎么办？
    27
  • DataWorks中应用通过jar包访问odps？
    678
    • 展开全部
  • 数据中台的智能进化—阿里巴巴十二年数据平台发展历程
    7488
  • 2万字揭秘阿里巴巴数据治理平台DataWorks建设实践
    25724
  • 欢迎加入DataWorks产品钉钉交流群
    36063
  • DataWorks售前咨询
    5364
  • 大数据&AI的16种可能，2020阿里云客户最佳实践合集下载
    71772
  • DataWorks操作报错合集之DataWorks提交失败: 提交节点的源码内容到TSP(代码库)失败:"skynet_packageid is null，该怎么解决
    27
  • DataWorks操作报错合集之在DataWorks中，任务流在调度时间到达时停止运行，是什么原因导致的
    28
  • 大数据公共数据集上线，免费试用TB级数据分析
    6417
  • DataWorks操作报错合集之在DataWorks中使用ODPS SQL时遇到"该文件对应引擎实例已失效，请重新选择可用的引擎实例"的错误提示”，是什么导致的
    30
  • DataWorks产品使用合集之DataWorks中临时表和临时变量在holo中的用法如何解决
    26
    • 展开全部

    相关课程

    更多
  • 企业运维训练营之大数据EMR原理与实践
    2696
    8
    去学习
  • EMR Studio 大数据处理最佳实践课程
    139
    2
    去学习
  • 阿里云 EMR on ACK 实战
    156
    4
    去学习
  • 一站式大数据开发治理平台DataWorks初级课程
    399
    11
    去学习
  • DataWorks 使用教程
    1112
    9
    去学习
  • DataWorks一站式大数据开发治理平台精品课程
    7394
    35
    去学习

    • 相关文章

  • DataWorks操作报错合集之DataWorks ODPS数据同步后，timesramp遇到时区问题，解决方法是什么
  • DataWorks操作报错合集之在DataWorks中，任务流在调度时间到达时停止运行，是什么原因导致的
  • DataWorks操作报错合集之DataWorksUDF 报错：evaluate for user defined function xxx cannot be loaded from any resources，该怎么处理
  • DataWorks操作报错合集之DataWorks任务异常 报错： GET_GROUP_SLOT_EXCEPTION 该怎么处理
  • 数据推送上线 ，抢先体验，欢迎来用！ 支持钉钉！

    • 相关电子书

    更多
    • DataWorks数据集成实时同步最佳实践（含内测邀请）-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季 立即下载
    基于DataWorks数据服务构建疫情大屏-2020飞天大数据平台实战应用第一季 立即下载

    相关实验场景

    更多
  • 基于DTS构建一站式实时数据服务
    49
    1.0小时
    去实验
  • 基于Hologres+PAI+计算巢，5分钟搭建企业级AI问答知识库
    47
    1.0小时
    去实验
  • 基于Hologres+Flink搭建GitHub实时数据大屏
    33
    1.0小时
    去实验
  • 使用CloudLens管理SLS日志采集
    31
    1.0小时
    去实验
  • 玩转MaxCompute SQL! 30分钟搞定数据分析挖掘
    363
    1.0小时
    去实验
  • 基于Flink+Tair搭建实时监控大屏
    39
    1.0小时
    去实验