开发者社区大数据与机器学习实时计算 Flink 正文

Yarn 中任务提交流程是怎样的

展开

收起

一人吃饱，全家不饿 2021-01-05 23:32:32 1179 版权

1 条回答

写回答

取消提交回答

一人吃饱，全家不饿
1. 用户在 Client 端提交任务后会先给到 Resource Manager。
2. Resource Manager 会启动 Container，接着进一步启动 Application Master
3. Master 节点启动之后，会向 Resource Manager 再重新申请资源
4. Resource Manager 将资源分配给 Application Master 之后，Application Master 再将具体的 Task 调度起来去执行。
2021-01-05 23:32:41

赞同展开评论

问答分类：

资源调度实时计算 Flink版

问答标签：

Yarn任务 Yarn流程 Yarn提交 Yarn任务流程

问答地址：

开发者社区 > 大数据与机器学习 > 实时计算 Flink > 问答

相关问答

实时计算 Flink版

dataworks部分定时任务显示任务异常退出，但是上yarn上显示任务运行成功这个是什么原因呢？

flink cdc3中，用flink standalone集群，我如何将这个任务提交到yarn上呢？

582

请问如何用flink sql客户端用yarn application模式提交任务呢？

2677

在Flink CDC中， 3.x版本也不支持任务提交yarn？

flink on yarn 集群跑cdc任务突然报这个错误，集群连不上了这是什么问题呢？

115

在Flink CDC中flink-cdc整库同步任务能不能指定yarn-session的id提交？

Flink使用单作业模式提交任务到yarn，出现这个错误怎么解决呀？

104

Flink CDC里flink on yarn，咋提交 CDC sql 任务呀？

yarn-session 直接 kill 集群会导致 flink 任务无法恢复吗？

175

Flink CDC有提交 yarn app模式的实时任务吗？

大数据与机器学习

实时计算 Flink

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务，基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎，提高作业开发运维效率。

我要提问

收录在圈子:

阿里云实时计算Flink

199212

+ 订阅

实时计算 Flink 版（Alibaba Cloud Realtime Compute for Apache Flink，Powered by Ververica）是阿里云基于 Apache Flink 构建的企业级、高性能实时大数据处理系统，由 Apache Flink 创始团队官方出品，拥有全球统一商业化品牌，完全兼容开源 Flink API，提供丰富的企业级增值功能。

从嵌入式状态管理到云原生架构：Apache Flink 的演进与下一代增量计算范式

抖音基于 Flink 的 DataOps 能力实践

【赵渝强老师】阿里云大数据MaxCompute的体系架构

一种多尺度协同变异的粒子群优化算法（Python代码实现）

在Vue 3项目中集成Element Plus组件库的步骤

Yarn 中任务提交流程是怎样的

实时计算 Flink

相关文章

热门讨论

热门文章