大佬能看下Flink CDC这个源表更新或者插入数据sink表为啥没有更新啊
大佬能看下Flink CDC这个源表更新或者插入数据sink表为啥没有更新啊
本地测试需要开checkpoint吗，是row格式的，不需要设置checkpoint，我百度设置'debezium.snapshot.mode' = 'initial' 就行了，这个参数好像需要设置，为啥这个参数影响这么大呢，怎么设置先全量，然后再增量呢，我现在有个场景，有100张表，我想先用spark或者presto计算这个100个表，然后用flink从我计算的点开始增量计算，或者有什么好的办法吗，线上分了100张表，我需要实时计算100张表到一个宽表
展开
收起
1
条回答
写回答
写回答
-
首先确认binlog日志是否开启，检查checkpoint是否设置，binlog日志的设置是否为flinkcdc要求的配置方式，当然，好的，那你是没加同步模式，这是必须指定从哪儿开始同步数据，也就是说是全量还是增量同步，你目前现在用的就是全量，全量同步完后续后续进来的数据就是增量，此回答整理自钉群“Flink CDC 社区”
2023-05-01 17:42:12赞同 展开评论 打赏
问答分类：
相关产品：
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
相关问答
热门讨论
热门文章
FFA 2024 大会门票免费送！AI时代下大数据技术未来路在何方？
960
P人出游，你是否需要一个懂你更懂规划的AI导游呢？来搭建专属文旅问答机器人吧
1698
数据来源：com.alibaba.fastjson.JSONException: syntax er
5523
Slot request bulk is not fulfillable，20以上job同时部署失败
694
大佬，Caused by: java.lang.ClassNotFoundException: or
434
Dataphin和 Dataworks 有啥区别呢？
1833
虚拟机占用内存特别大，90多个G,网上各种方法都试过了，怎么解决这个问题
1352
dataworks里面的stg层、ods层、dwd层、dws层、是怎么分层的呢？
2585
兄弟们啊，同步中DI、RI到底什么意思，是什么的缩写？
337
FlinkCDC MySQL 中 scan.startup.mode 用的是什么模式啊？
3504
展开全部
相关文章
相关电子书
更多
