开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

mysql表中进行 增/删/改 表记录都没有被捕获到,请问是什么原因呢?只是第一次全量数据能够正常输

flink-sql-connector-mysql-cdc-2.2.1.jar 输出到Stdout,mysql表中进行 增/删/改 表记录都没有被捕获到,请问是什么原因呢?只是第一次全量数据能够正常输出

提问27.png

展开
收起
飘飘斯嘉丽 2023-02-02 17:02:08 512 0
3 条回答
写回答
取消 提交回答
  • 可能是因为MySQL的binlog格式不支持,请检查MySQL的binlog格式是否为ROW格式,如果不是,请修改MySQL的binlog格式为ROW格式,然后重启MySQL服务,再次运行Flink SQL Connector for MySQL CDC,应该就可以正常捕获到MySQL表中的增/删/改表记录了。

    2023-02-02 21:49:28
    赞同 展开评论 打赏
  • 看是不是,并行度>1?要么设置为1,>1时要设置checkpoint

    此答案来自钉钉群“【2】Apache Flink China 社区”

    2023-02-02 17:28:29
    赞同 展开评论 打赏
  • 天下风云出我辈,一入江湖岁月催,皇图霸业谈笑中,不胜人生一场醉。

    当我们执行一些sql的时候,可能违反了mysql的一些约束,导致mysql内部报错,如插入数据违反唯一约束,更新数据超时等

    2023-02-02 17:18:19
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关电子书

更多
搭建电商项目架构连接MySQL 立即下载
搭建4层电商项目架构,实战连接MySQL 立即下载
PolarDB MySQL引擎重磅功能及产品能力盛大发布 立即下载

相关镜像