备案控制台

开发者社区

开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

flink以yarn pre模式提交job，那么taskmanager执行在哪一台节点上，就是消耗该

flink以yarn pre模式提交job，那么taskmanager执行在哪一台节点上，就是消耗该台节点的内存资源和CPU 是吗？

展开

收起

游客3oewgrzrf6o5c 2022-08-03 17:01:10 715 0

1 条回答

写回答

取消提交回答

游客bcfx2q4kttgbm

你看web上面的tm分配到哪台机器上面了。提交任务的客户端机器内存占用高首先看下flink run 模式有没有用分离模式启动。如果不是分离模式客户端还会保留进程获取远程的metric，任务提交到yarn之前的校验工作也会在客户端进行。取决于任务的类型，一个任务占用上g内存都是正常的（此答案整理自【③群】Apache Flink China社区）

2022-08-03 17:59:39

赞同展开评论打赏

问答分类：

资源调度流计算实时计算 Flink版

问答标签：

flink Yarn模式 Yarn flink Yarn模式 flink Yarn 实时计算 Flink版模式

问答地址：

开发者社区 > 大数据与机器学习 > 实时计算 Flink > 问答

相关产品：

实时计算 Flink版

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

相关问答

实时计算 Flink版

请教一下，flink on yarn模式下，怎么对job作业进行指标监控？

52

3

0

Flink CDC哪位大佬采集过sqlserver 从节点的，可否指点一下啊？

31

1

0

搭建flink为什么过了一会儿节点TaskManagerRunner消失了?

78

2

0

Flink CDC同步mysql数据时，遇到mysql主从节点切换问题怎么处理的？

44

1

0

请教下大家Flink CDC，flink消费kafka中的数据，也配成3个节点的不是？

26

1

0

Cloudera cdp的flink怎么收费？按节点还是按配置？

28

2

0

Flink CDC中tikv这个怎么处理呢增加tikv节点么？

38

4

0

Flink CDC里对于经常水平扩展的分布式数据库，实时同步，在扩展数据库分片节点，可以直接加源吗？

14

0

0

flink cdc3.0怎么设置？我想设置任务的节点槽数，来打散任务并行分布的节点。

18

0

0

E-MapReduce有时候遇到跑hive 任务跑着 yarn 节点就掉了如何排查问题？

34

1

0

大数据与机器学习

实时计算 Flink

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务，基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎，提高作业开发运维效率。

我要提问

相关产品

实时计算 Flink版

文档详情产品详情

热门讨论

热门文章

Flink-CDC 文档网站地址是什么？

FlinkCDC MySQL 中 scan.startup.mode 用的是什么模式啊？

Flink CDC有遇见这个问题的吗？

flink谁遇到过这种问题嘛？怎么解决啊？

Flink1.17为什么需要JDK 11呢？JDK8我试了也能运行

Flink CDC中Starroks和doris哪个强一点？

flink cdc，读取datetime类型，全都变成了时间戳，怎么解决？下游是可以解决。但是我想知

各位老师，请教个问题，flink 会在本地 /tmp 目录下产生大量flink-临时文件，目前看好？

Caused by: org.apache.kafka.common.errors.TimeoutE

flink1.15启动后无法访问webui的问题有人遇到过吗

展开全部

数据仓库介绍与实时数仓案例

权威详解 | 阿里新一代实时计算引擎 Blink，每秒支持数十亿次计算

Flink+Paimon+Hologres 构建实时湖仓数据分析

阿里云实时计算产品案例&解决方案汇总

流计算精品翻译: The Dataflow Model

Flink SQL 功能解密系列 —— 流计算“撤回(Retraction)”案例分析

Apache Flink 漫谈系列(04) - State

基于Flink的实时日志分析系统实践

Apache Flink 进阶（一）：Runtime 核心机制剖析

Flink on YARN（上）：一张图轻松掌握基础架构与启动流程

展开全部

相关课程

更多

Apache Flink 入门到实战 - Flink开源社区出品

1392

16

去学习

实时计算 Flink 版产品入门与实操

3806

10

去学习

开源 Flink 极速上手教程

1752

7

去学习

Hadoop 分布式资源管理框架 YARN

438

5

去学习

大数据实时计算框架Spark快速入门

778

93

去学习

Apache Flink 入门

4826

9

去学习

相关电子书

更多

深度学习+大数据 TensorFlow on Yarn 立即下载

Docker on Yarn 微服务实践 立即下载

深度学习+大数据-TensorFlow on Yarn 立即下载

相关实验场景

更多