开发者社区 > 大数据与机器学习 > 正文

flink cdc中,我现在想全量阶段并行度设置为100,然后增量阶段20,这个需要怎么设置和处理?

flink cdc中,我现在想全量阶段并行度设置为100,然后增量阶段20,这个需要怎么设置和处理?有案列吗?

展开
收起
提个问题 2023-07-10 14:10:45 62 0
1 条回答
写回答
取消 提交回答
  • Flink目前应该没有自动调节并行度的方法,只能自己手动操作了,全量读完之后,触发savepoint,然后修改并行度重新提交任务,如果没来得及执行savepoint就宕机了要重启,可以配置保留checkpoint,从最后一次checkpoint开始执行。,此回答整理自钉群“Flink CDC 社区”

    2023-07-10 14:13:46
    赞同 展开评论 打赏

大数据领域前沿技术分享与交流,这里不止有技术干货、学习心得、企业实践、社区活动,还有未来。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载