开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

Flink CDC帮忙看一下起了很多个线程的问题?

Flink CDC大佬能帮忙看一下我昨天的那个问题嘛?起了很多个线程的问题f6b62be76f91844f1876c80d3bfc191c.png

展开
收起
真的很搞笑 2023-08-29 11:51:59 80 0
1 条回答
写回答
取消 提交回答
  • Flink CDC 在正常运行时,会创建多个线程来处理数据。这些线程包括:

    Source 线程:负责从数据源读取数据。
    Sink 线程:负责将数据写入目标系统。
    Processor 线程:负责处理数据。
    如果您看到 Flink CDC 创建了很多个线程,并且这些线程占用了很多 CPU 资源,您可以尝试以下方法来解决该问题:

    检查是否有太多的业务逻辑在 Processor 线程里面执行。如果有,您可以将这些业务逻辑移到其他地方执行。
    检查是否有太多的数据需要处理。如果有,您可以减少 Flink CDC 读取的数据量。
    检查是否有太多的目标系统需要写入数据。如果有,您可以减少 Flink CDC 写入的数据量。
    如果您仍然遇到问题,您可以联系 Flink 的社区支持。

    2023-09-20 10:38:29
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    多IO线程优化版 立即下载