开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

Flink我有一个小集群,3个节点,目前4个作业在跑;为啥 都到一个节点上了呀?导致了那个节点的内存

Flink我有一个小集群,3个节点,目前4个作业在跑;为啥 都到一个节点上了呀?导致了那个节点的内存使用超高有没有办法 让作业跑在其他的节点上啊dbdbd4414bf1961212ea051b5042d403.png

展开
收起
cuicuicuic 2023-08-01 12:22:38 79 0
1 条回答
写回答
取消 提交回答
  • 这个问题可能是因为 Flink 的负载均衡策略导致的。Flink 默认的负载均衡策略是 Random Load Balancer,该策略会随机选择一个 TaskManager 来运行任务。如果有多个任务同时提交到 Flink 集群,那么这些任务很可能会都运行在同一个 TaskManager 上。

    为了避免这个问题,可以使用 Round Robin Load Balancer 策略。该策略会按顺序选择 TaskManager 来运行任务。这样一来,每个 TaskManager 都会均匀地运行任务,从而避免出现某个 TaskManager 内存使用超高的问题。

    2023-09-27 09:39:39
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载