AI 助理
备案控制台
开发者社区 问答 正文

实时计算Flink作业如何调整Taskmanagr数量

已解决

实时计算Flink作业如何调整Taskmanagr数量

展开
收起
提个问题 2024-06-10 10:12:07 245 分享 版权

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

1 条回答
写回答
取消 提交回答
  • 社区答人
    开发者社区问答官方账号
    官方回答
    采纳回答
    一般情况下：
    • TaskManager个数的计算公式是：TaskManager个数 = Parallelism / numberOfTaskSlots。
    • 一般情况下taskmanager.numberOfTaskSlots参数为1，故默认并发数就等于taskmanager数。只是在开启细粒度的情况下，设置 taskmanager.numberOfTaskSlots 是不生效的，或者说它只是一个建议值，实际的 slot 数是结合 cpu、memory 动态计算得到的，所以这个时候TM数就会和预期有差异（细粒度模式：JobManager日志里 cluster.fine-grained-resource-management.enabled设置为 true）。
    • 需要注意如果您是Jar作业在代码层面设置了并发数，您在VVP界面修改并发是无法生效的，因此会导致TaskManager数量无法变更。
    2024-06-10 10:12:08
    赞同 1 展开评论
问答分类：
流计算 实时计算 Flink版
问答标签：
实时计算 Flink版作业
问答地址：
开发者社区 > 大数据 > 问答
关联地址：
问产品> 实时计算 Flink版
相关问答
实时计算 Flink版
取消 flink 作业后 ，发现 flink 所在的 taskmanage 挂掉了。上面的 flin
2598
5
0
flink大作业启动频繁报akka.pattern.AskTimeoutException 大家有
1382
3
0
如果上游mysql库下的表很多，数据变化很频繁的话，会不会造成下游flink cdc作业消费binl
797
1
0
大家 flink cdc 用的 是不是都是 datastream 方式? 如果sql 作业 貌似
622
0
0
flink作业不是每个任务里面点进去都有各自的日志吗？
1046
5
0
我开启 flink cdc作业后 为什么 数据库 上那么多 binlog 解析器
909
1
0
有flink的python作业的demo吗 如何连接我的catalog的表如何输出呢
674
1
0
大佬们， flink的yarn-session模式是在那个服务器起的在哪个服务器提交作业吗，还是根
1003
1
0
请问一下，flink作业stop后，savepoint路径里的文件消失了，这个怎么回事昵？
762
1
0
flink CDC的作业放上去,放多几个集群就宕机崩了是什么情况.flinkCDC的作业压力跟数据量
516
0
0