开发者社区> 问答> 正文

想要flink任务自动扩缩容有什么办法吗?

请问如果想要flink任务自动扩缩容有什么办法吗,反压的时候自动加资源,然后在自动缩。。。。。*来自志愿者整理的flink邮件归档

展开
收起
游客sadna6pkvqnz6 2021-12-07 17:27:47 1307 0
1 条回答
写回答
取消 提交回答
  • 目前 flink 是不支持运行时扩缩容的。

    如果要做的话,只能是从外部根据 metrics 判断反压,然后停掉之前的作业,修改并发后再重新提交作业,从之前的 checkpoint 恢复。

    目前社区正在准备一项 declarative resource management 的工作,让 flink 作业的并发度自动适配可用资源。这项工作完成后,可以通过从外部调整可用资源数量来调整作业的并发度。*来自志愿者整理的flink

    2021-12-07 21:06:18
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
Flink CDC Meetup PPT - 龚中强 立即下载
Flink CDC Meetup PPT - 王赫 立即下载
Flink CDC Meetup PPT - 覃立辉 立即下载