Flink CDC中mysqlcdc读取的时候设置'有什么影响吗?

Flink CDC中mysqlcdc读取的时候设置'scan.incremental.snapshot.enabled' = 'false',有什么影响吗?

展开
收起
真的很搞笑 2023-09-28 10:51:08 95 分享 版权
1 条回答
写回答
取消 提交回答
  • fetch size 是 MySQL 的连接池属性,它表示每次从 MySQL 连接池中获取的连接数量。

    在 Flink CDC 中,fetch size 可以用来控制一次从 MySQL 中获取的数据量。

    如果 fetch size 设置得太小,则可能会导致 Flink CDC 每次从 MySQL 中获取的数据量过少,从而导致数据延迟。

    如果 fetch size 设置得太大,则可能会导致 Flink CDC 每次从 MySQL 中获取的数据量过多,从而导致内存占用过多。

    在实际使用中,可以根据业务场景和数据量来调整 fetch size 的值。

    默认情况下,fetch size 的值为 100。

    2023-10-17 10:15:47
    赞同 展开评论

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

还有其他疑问?
咨询AI助理