开发者社区 > 大数据与机器学习 > 正文

求个大佬看一哈 Flink CDC这个问题,使用savepoint 启动 ,然后加了新表,同步 快照

求个大佬看一哈 Flink CDC这个问题,使用savepoint 启动 ,然后加了新表,同步 快照的时候,同步到一部分后就仿佛停了一样,既不同步快照,又不同步binlog,也不报错,等了几个小时都这样,仿佛这段时间啥都没干https://github.com/ververica/flink-cdc-connectors/issues/2105,flink 1.14.2 flink CDC 2.2.1 mysql 8.0.22,不大,如果不从 savepoint 启动,好像没出现过这种问题,都会同步完 快照之后同步 binlog ,但是 通过 savepoint 启动加表的话,就容易这样,完全不晓得 flink 这段时间在忙些啥,也没报错,然后 不管是新表的 快照,还是 之前表的binlog 都不同步 ,我已经打算放弃了,一周了,增量数据不同步

展开
收起
真的很搞笑 2023-05-01 16:01:15 111 0
1 条回答
写回答
取消 提交回答
  • 毛病挺多的。。我之前遇到的是,加表后,旧表的数据丢了一些,然后再从sp启动一下又追回来了,你们集群大吗,mysql的,原生dbz能hold住,小集群,此回答整理自钉群“Flink CDC 社区”

    2023-05-01 17:50:19
    赞同 展开评论 打赏

大数据领域前沿技术分享与交流,这里不止有技术干货、学习心得、企业实践、社区活动,还有未来。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载