AI 助理
备案控制台
开发者社区 问答 正文

flink job task在taskmanager上分布不均衡怎么办？

flink集群(flink 1.10.1)，taskmanager有4个，每个有10个slot。 然后我有2个job， 每个并行度是4，预期是会分布到不同taskmanager的slot上(也就是4个taskmanager平均分配2个slot， 这样能更好的利用cpu资源). 结果发现这2个job的8个task全部分配到同一个taskmanager上了。 为什么？ 有什么配置可以改变这种行为吗？ 我们想要的是task能分到不同的taskmanager上。 谢谢！*来自志愿者整理的flink邮件归档

展开
收起
EXCEED 2021-12-02 11:17:23 1133 分享 版权

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

1 条回答
写回答
取消 提交回答
  • 彗星halation

    给l另一个job设置个组别名，不同的组不会slot共享，会跑到别的slot上，slot可以灵活的运行在不同的TM上。*来自志愿者整理的FLINK邮件归档

    2021-12-02 11:28:47
    赞同 展开评论
问答分类：
流计算 实时计算 Flink版
问答标签：
实时计算 Flink版TaskManager 实时计算 Flink版job 实时计算 Flink版Manager 实时计算 Flink版Task 实时计算 Flink版job task
问答地址：
开发者社区 > 大数据 > 问答
相关问答
在 docker 上部署 Flink Task，UI Web 可以管理所有的那种？
118
0
0
Flink任务taskmanager异常退出原因及解决方案
611
1
0
Flink报错Task did not exit gracefully within 180+...
132
0
0
Flink job取消后，死循环执行Registering job manager，如何排查呢？
111
0
0
flink的sink算子，一直都有部分task处于初始化阶段，但是如果用print打印则能正常运行
139
1
0
在 Flink 作业中，为什么会出现 Task 分布不均的问题？
213
1
0
在Flink CDC中task的slots分配不均，可以怎么优化？
108
0
0
K8S部署的Flink如何配JobManager和TaskManager的日志？
153
0
0
在Flink CDC中一个job节点 两个task节点，数量能设置为更多吗 ？
78
1
0
对于Flink CDC，自动关闭空闲的task，这个task是指什么？
83
1
0