Flink读取CDC全量数据同步没有异常但是无法同步增量数据
已解决Flink读取CDC全量数据同步没有异常但是无法同步增量数据
展开
收起
1
条回答
写回答
写回答
-
开发者社区问答官方账号官方回答采纳回答1.MySQL CDC在做全量读到增量读的切换时，如果全量读是多并发，则在进入增量前要多等一个Checkpoint，来确保全量的数据已经写入到下游后再读取增量数据，从而保证数据的正确性。但是，如果您设置的Checkpoint间隔时间比较大，例如20分钟，则会导致作业20分钟后才开始同步增量数据。因此，您需要根据业务情况设置合理的Checkpoint间隔时间。2.如果您使用的是RDS MySQL 5.6只读实例，该类型实例提供的binlog文件是经过简化的，日志中不包含数据，是无法读取到增量阶段的数据的。因此，这种情况建议您使用可写实例或者升级RDS MySQL至更高版本。2024-05-29 13:07:26赞同 展开评论 打赏
问答分类：
关联地址：
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
相关问答
