大佬问下,flink-cdc读取分区数据时,丢失部分分区数据,有碰到过吗?我们实践发现:cdc读取一

大佬问下,flink-cdc读取分区数据时,丢失部分分区数据,有碰到过吗?我们实践发现:cdc读取一个分区写入的数据表时会丢,但如果建表是不设分区,CDC读取就不会丢,分片表,一个tidb自定义的东西,你看下image.png 不加加的话,这个表就可以读到所有数据,加这个配置就丢数据

展开
收起
真的很搞笑 2023-06-11 16:36:30 152 分享 版权
1 条回答
写回答
取消 提交回答
  • cdc读取分区数据?cdc接入的不是数据库吗,分区表?你是mysql8.0吧,一般是不支持读分区表的,我猜是分区表的最细粒度才有类似的binlog,分区表本身没有类似的binlog,此回答整理自钉群“Flink CDC 社区”

    2023-06-11 16:49:51
    赞同 展开评论

大数据领域前沿技术分享与交流,这里不止有技术干货、学习心得、企业实践、社区活动,还有未来。

还有其他疑问?
咨询AI助理