Flink CDC mysql连接器配置这个选项,为啥不同步历史数据呢?

Flink CDC mysql连接器配置这个选项,为啥不同步历史数据呢?4d4a84fe15054057e354722455ebcb38.png

展开
收起
真的很搞笑 2023-10-23 15:09:36 139 分享 版权
1 条回答
写回答
取消 提交回答
  • StartupOptions.initial() 是 Flink SQL Client 中用于初始化执行环境的选项。它包含了所有默认的 startup options,但并不包含任何特定的 startup option。

    如果你想要同步历史数据,你需要在 Flink SQL 中显式地指定 START AT CURRENT_TIMESTAMP 或者 START AT UNIX_TIMESTAMP(...)。例如:

    INSERT INTO MyTable
    SELECT * FROM source
    START AT CURRENT_TIMESTAMP;
    

    或者

    INSERT INTO MyTable
    SELECT * FROM source
    START AT UNIX_TIMESTAMP(my_timestamp_column);
    

    这样,Flink CDC 任务就会从当前时间或者指定的 Unix 时间戳开始消费数据,从而同步历史数据。

    2023-10-24 09:52:49
    赞同 展开评论

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

还有其他疑问?
咨询AI助理