开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

请问下 Flink CDC并行度设置 4 ,有些subtask 都没有结束数据,这块是需要怎么处理?

请问下 Flink CDC并行度设置 4 ,有些subtask 都没有结束数据,这块是需要怎么处理呢?image.png

展开
收起
真的很搞笑 2023-08-01 13:37:11 89 0
1 条回答
写回答
取消 提交回答
  • Flink CDC 的并行度设置为 4,有些 subtask 没有结束数据,可能有以下几个原因:

    数据量太大。如果数据量太大,Flink CDC 就需要花费更多的时间来处理数据,这可能会导致一些 subtask 没有结束。可以尝试减少并行度,或者增加 Flink CDC 的作业运行时间。
    数据源出现异常。如果数据源出现异常,Flink CDC 就可能无法正常读取数据,这可能会导致一些 subtask 没有结束。可以尝试查看数据源的日志,或者联系数据源的管理员。
    Flink CDC 出现异常。如果 Flink CDC 本身出现异常,也可能会导致有些 subtask 没有结束。可以尝试查看 Flink CDC 的运行日志,或者联系 Flink CDC 的开发团队。
    如果您已经确认数据量、数据源和 Flink CDC 都没有问题,但是仍然有一些 subtask 没有结束,那么可以尝试联系 Flink CDC 的开发团队寻求帮助。

    2023-09-25 18:05:11
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载