开发者社区> 问答> 正文

E-MapReduce集群中是否有类似于AirFlow azkaban这类专门对组件进行调度的软件

已解决

E-MapReduce集群中是否有类似于AirFlow azkaban这类专门对组件进行调度的软件

展开
收起
提个问题 2024-06-14 14:10:21 9 0
1 条回答
写回答
取消 提交回答
  • 开发者社区问答官方账号
    官方回答
    采纳回答
    • EMR Studio是E-MapReduce提供的开源大数据开发套件,包含Apache Zeppelin、Jupyter Notebook和Apache Airflow等开源组件。能够无缝关联EMR集群(EMR on ECS和EMR on ACK)的计算引擎提交任务,并提供了交互式开发、任务调度和任务监控等开源大数据开发使用体验。覆盖了大数据处理ETL、交互式数据分析、机器学习和实时计算等多种应用场景。其中EMR Studio中的Airflow已不支持新购,历史Airflow的相关配置请参考官方文档
    • 如您无法新购Airflow,可以参考文档使用新版DataWorks,实现任务工作流的配置和定时调度、元数据管理及数据质量监控告警等功能,为用户提供一站式数据湖开发和治理的环境。
    2024-06-14 14:10:22
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
低代码开发师(初级)实战教程 立即下载
冬季实战营第三期:MySQL数据库进阶实战 立即下载
阿里巴巴DevOps 最佳实践手册 立即下载