2
条回答
写回答
写回答
-
Flink的资源管理主要涉及两级资源：集群资源和Flink自身资源。集群资源是指硬件资源，包括CPU、内存、GPU等，由资源管理框架（例如Yarn、K8s、Mesos）来进行管理，Flink通过这些框架来申请和释放资源。另一方面，Flink自身资源涉及到每个子任务的资源使用，这部分资源由Flink自身进行管理。
在自顶向下的资源管理中，我们配置的是整个Job的资源，而Flink通过Slot Sharing机制控制Slot的数量和负载均衡，通过调整Task Manager / Slot的资源，以适应一个Slot Sharing Group的需求。
需要注意的是，ResourceManager作为统一的集群资源管理器，用于管理整个集群的计算资源，包括 CPU资源、内存资源等。ResourceManager负责向集群资源管理器申请容器资源启动TaskManager实例。
2023-11-28 10:58:14赞同 展开评论 打赏 -
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
相关问答
实时计算Flink版是阿里云提供的全托管Serverless Flink云服务，基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎，提高作业开发运维效率。
热门讨论
热门文章
请问Flink 写数据到 ES 有遇到过这个报错的么？
2143
FFA 2024 大会门票免费送！AI时代下大数据技术未来路在何方？
1713
flink1.20.0 部署后发布报错，是怎么回事，各种配置都配置了
329
Flink sql 累计历史订单金额
151
Flink如何配置Task Manager？
712
FlinkCDC MySQL 中 scan.startup.mode 用的是什么模式啊？
3621
大佬们，有遇到flink on k8s，访问ui界面 log接口报500吗？
325
请问如何用flink sql客户端用yarn application模式提交任务呢？
1572
请教下，finksql 这个statettl 哪里设置
1619
Caused by: org.apache.kafka.common.errors.TimeoutE
3346
展开全部
权威详解 | 阿里新一代实时计算引擎 Blink，每秒支持数十亿次计算
24494
OPPO数据中台之基石：基于Flink SQL构建实数据仓库
21937
Flink SQL 功能解密系列 —— 维表 JOIN 与异步优化
27982
Flink Checkpoint 问题排查实用指南
13227
广告场景下的实时计算
11067
Flink on YARN（上）：一张图轻松掌握基础架构与启动流程
9766
Flink SQL 功能解密系列 -- Aysnc I/O
5468
年度回顾 | 2019 年的 Apache Flink（文末有福利）
4302
如何分析及处理 Flink 反压？
15825
【阿里内部应用】基于Blink构建亲听项目以及全链路debug项目实时响应能力
3728
展开全部
相关课程
更多
相关文章
相关电子书
更多
