开发者社区 问答 正文

E-MapReduce集群中是否有类似于AirFlow azkaban这类专门对组件进行调度的软件

已解决

E-MapReduce集群中是否有类似于AirFlow azkaban这类专门对组件进行调度的软件

展开
收起
提个问题 2024-06-14 14:10:21 43 分享
分享
版权
举报
1 条回答
写回答
取消 提交回答
  • 开发者社区问答官方账号
    官方回答
    采纳回答
    • EMR Studio是E-MapReduce提供的开源大数据开发套件,包含Apache Zeppelin、Jupyter Notebook和Apache Airflow等开源组件。能够无缝关联EMR集群(EMR on ECS和EMR on ACK)的计算引擎提交任务,并提供了交互式开发、任务调度和任务监控等开源大数据开发使用体验。覆盖了大数据处理ETL、交互式数据分析、机器学习和实时计算等多种应用场景。其中EMR Studio中的Airflow已不支持新购,历史Airflow的相关配置请参考官方文档
    • 如您无法新购Airflow,可以参考文档使用新版DataWorks,实现任务工作流的配置和定时调度、元数据管理及数据质量监控告警等功能,为用户提供一站式数据湖开发和治理的环境。
    2024-06-14 14:10:22 举报
    赞同 评论

    评论

    全部评论 (0)

    登录后可评论
AI助理

你好,我是AI助理

可以解答问题、推荐解决方案等