有谁知道如何使用flink cdc的时候,从备库读就能实时采集数据,不一定非要从主库读?

有谁知道如何使用flink cdc的时候,从备库读就能实时采集数据,不一定非要从主库读?

展开
收起
真的很搞笑 2023-11-07 19:33:15 95 分享 版权
1 条回答
写回答
取消 提交回答
  • Flink CDC的设计理念是从主库进行数据的实时捕获和同步。这是因为主库通常负责写操作,因此所有的数据变化都会首先在主库上发生。而从备库读取数据可能会面临数据不一致的问题,因为备库的数据可能还没有来得及与主库的数据进行同步。

    然而,如果你想从备库读取数据,你需要确保以下几点:

    1. 备库的数据必须与主库的数据保持一致。这意味着你需要有一个机制来确保备库的数据能够及时地从主库进行同步。

    2. 你需要确保备库的读写权限已经被正确地授予。

    3. 你需要确保备库的性能足够支撑你的实时数据采集需求。

    4. 你需要考虑到主备切换的可能性,并确保你的数据采集系统能够在主备切换后正常运行。

    虽然从备库读取数据在某些情况下可能是可行的,但是这需要你对数据库的复制原理和数据一致性有深入的理解,并在实施前进行充分的测试和验证。

    2023-11-10 10:34:58
    赞同 1 展开评论

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

还有其他疑问?
咨询AI助理