请问在使用Flink CDC中mongo cdc的时候，全量数据同步完成后，不会同步增量数据，这种?
请问在使用Flink CDC中mongo cdc的时候，全量数据同步完成后，不会同步增量数据，这种问题有人遇到过吗，我建了一个issue: https://github.com/ververica/flink-cdc-connectors/issues/2183？增量数量的量不小，我直接用mongo change stream是可以拉到数据的
展开
收起
1
条回答
写回答
写回答
-
may be 你的增量数据还到sink 到hudi的条件，除非你配置了每条数据都sink到了hudi，一般这种场景很多都是微批 sink，你在cdc启动后到增量后试试在mongo端多写点数据，100条。1000条，mongo change stream当然是可以拉取数据，你需要看下hudi sink的条件，此回答整理自钉群“Flink CDC 社区”
2023-06-11 15:22:18赞同 展开评论 打赏
问答分类：
相关产品：
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
相关问答
热门讨论
热门文章
FFA 2024 大会门票免费送！AI时代下大数据技术未来路在何方？
1104
P人出游，你是否需要一个懂你更懂规划的AI导游呢？来搭建专属文旅问答机器人吧
1733
兄弟们啊，同步中DI、RI到底什么意思，是什么的缩写？
357
数据来源：com.alibaba.fastjson.JSONException: syntax er
5529
虚拟机占用内存特别大，90多个G,网上各种方法都试过了，怎么解决这个问题
1369
Slot request bulk is not fulfillable，20以上job同时部署失败
699
Caused by: org.apache.kafka.common.errors.TimeoutE
3231
dataworks里面的stg层、ods层、dwd层、dws层、是怎么分层的呢？
2596
FlinkCDC MySQL 中 scan.startup.mode 用的是什么模式啊？
3514
Dataphin和 Dataworks 有啥区别呢？
1842
展开全部
阿里云开源离线同步工具DataX3.0介绍
105443
你刚吃的兰州牛肉面，背后就藏着大数据
43150
盘古：阿里云飞天分布式存储系统设计深度解析
45053
odps是什么?
71588
拍立淘-以图搜图中的图像搜索算法
36977
分布式快照算法: Chandy-Lamport
23606
2017杭州云栖大会FAQ（持续更新中）
18542
OPPO数据中台之基石：基于Flink SQL构建实数据仓库
21911
［ETL实践指南］基于Kettle的MaxCompute插件实现数据上云
20319
Flume+Kafka+Flink+Redis构建大数据实时处理系统：实时统计网站PV、UV展示
23344
展开全部
相关课程
更多
相关文章
相关电子书
更多
