AI 助理
备案控制台
开发者社区 大数据与机器学习 实时计算 Flink 正文

Flink 中按什么顺序来调度 Task 的？

Flink 中按什么顺序来调度 Task 的？

展开
收起
一人吃饱，全家不饿 2021-01-05 22:41:41 1885 分享 版权

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

1 条回答
写回答
取消 提交回答
  • 一人吃饱，全家不饿

    目前 Flink 提供了两种基本的调度逻辑： 1. Eager 调度：它会在作业启动时申请资源将所有的 Task 调度起来。这种调度算法主要用来调度可能没有终止的流作业。 2. Lazy From Source：从 Source 开始，按拓扑顺序来进行调度。简单来说，Lazy From Source 会先调度没有上游任务的 Source 任务，当这些任务执行完成时，它会将输出数据缓存到内存或者写入到磁盘中。然后，对于后续的任务，当它的前驱任务全部执行完成后，Flink 就会将这些任务调度起来。这些任务会从读取上游缓存的输出数据进行自己的计算。这一过程继续进行直到所有的任务完成计算。

    2021-01-05 22:41:50
    赞同 展开评论
问答分类：
调度 流计算 实时计算 Flink版
问答标签：
实时计算 Flink版Task 实时计算 Flink版调度
问答地址：
开发者社区 > 大数据与机器学习 > 实时计算 Flink > 问答
相关问答
实时计算 Flink版
在 docker 上部署 Flink Task，UI Web 可以管理所有的那种？
117
0
0
Flink报错Task did not exit gracefully within 180+...
131
0
0
flink的sink算子，一直都有部分task处于初始化阶段，但是如果用print打印则能正常运行
134
1
0
Flink这个调度超过23h之后全都无法保存，为什么？
73
1
0
在 Flink 作业中，为什么会出现 Task 分布不均的问题？
208
1
0
在 Flink 容错 2.0 中，从调度的角度有哪些改进？
32
1
0
简述 Flink 中资源调度流程是怎样的？
96
1
0
在Flink CDC中task的slots分配不均，可以怎么优化？
103
0
0
在Flink CDC中一个job节点 两个task节点，数量能设置为更多吗 ？
76
1
0
对于Flink CDC，自动关闭空闲的task，这个task是指什么？
79
1
0
大数据与机器学习

实时计算 Flink

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务，基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎，提高作业开发运维效率。

我要提问
收录在圈子:
阿里云实时计算Flink
199212
+ 订阅
实时计算 Flink 版（Alibaba Cloud Realtime Compute for Apache Flink，Powered by Ververica）是阿里云基于 Apache Flink 构建的企业级、高性能实时大数据处理系统，由 Apache Flink 创始团队官方出品，拥有全球统一商业化品牌，完全兼容开源 Flink API，提供丰富的企业级增值功能。

相关文章

  • SpringBoot集成powerJob实战派
  • 【EI复现】一种建筑集成光储系统规划运行综合优化方法（Matlab代码实现）
  • 考虑特性分布的储能电站接入的电网多时间尺度源储荷协调调度策略（Matlab代码实现）
  • 【光伏功率预测】基于EMD-PCA-LSTM的光伏功率预测模型（Matlab代码实现）
  • 遗传算法+多目标规划算法+自适应神经模糊系统（Matlab代码实现）

    • 热门讨论

    热门文章

  • Flink CDC任务从savepoint/checkpoints状态中恢复作业错误问题
  • flink的1cu是指1cpu还是1cpu+4g存储？
  • 请问如何用flink sql客户端用yarn application模式提交任务呢？
  • 请问下大家有没有遇到过这个错:Caused by: java.lang.ClassNotFoundE
  • Flink-CDC 文档网站地址是什么？
  • 在斗鱼，实时计算发展的历程如何？
  • FlinkCDC MySQL 中 scan.startup.mode 用的是什么模式啊？
  • 在Flink CDC中ogg可以做实时同步吗？
  • Flink获取消费kafka的时候始终获取不到topic列表是啥原因啊？
  • 求教一个问题：我使用flinkcdc采集Oracle 19C数据报错如下：用了什么解决方案？
    • 展开全部
  • 为什么说流处理即未来？
  • Flink SQL 功能解密系列 —— 流计算“撤回(Retraction)”案例分析
  • 开篇 | 揭秘 Flink 1.9 新架构，Blink Planner 你会用了吗？
  • 从 Storm 到 Flink，汽车之家基于 Flink 的实时 SQL 平台设计思路与实践
  • 计算广告与流处理技术综述
  • Apache Flink 零基础入门（一）：基础概念解析
  • 基于实时计算（flink）打造舆情分析平台——新华智云
  • 阿里重磅开源全球首个批流一体机器学习平台Alink，Blink功能已全部贡献至Flink
  • Apache Flink 的迁移之路，2 年处理效果提升 5 倍
  • 【阿里内部应用】基于Blink构建搜索全链路debug系统快速定位搜索问题
    • 展开全部
    还有其他疑问?
    咨询AI助理