请问下 Flink CDC并行度设置 4 ,有些subtask 都没有结束数据,这块是需要怎么处理呢?
Flink CDC 的并行度设置为 4,有些 subtask 没有结束数据,可能有以下几个原因:
数据量太大。如果数据量太大,Flink CDC 就需要花费更多的时间来处理数据,这可能会导致一些 subtask 没有结束。可以尝试减少并行度,或者增加 Flink CDC 的作业运行时间。
数据源出现异常。如果数据源出现异常,Flink CDC 就可能无法正常读取数据,这可能会导致一些 subtask 没有结束。可以尝试查看数据源的日志,或者联系数据源的管理员。
Flink CDC 出现异常。如果 Flink CDC 本身出现异常,也可能会导致有些 subtask 没有结束。可以尝试查看 Flink CDC 的运行日志,或者联系 Flink CDC 的开发团队。
如果您已经确认数据量、数据源和 Flink CDC 都没有问题,但是仍然有一些 subtask 没有结束,那么可以尝试联系 Flink CDC 的开发团队寻求帮助。
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。