请问有什么方式Flink CDC可以同步部分的全量数据？
请问有什么方式Flink CDC可以同步部分的全量数据？
并不是将所有的数据加载到flink后进行谓词过滤，而是传入一个限定数据范围的select的语句，在数据库端进行数据选择，再接收binlog数据
展开
收起
1
条回答
写回答
写回答
-
Flink CDC 提供了 startFromEarliest 和 startFromLatest 两个参数来指定从哪里开始读取数据。
startFromEarliest 表示从最早的数据开始读取。
startFromLatest 表示从最新的数据开始读取。
如果您想同步部分的全量数据，可以使用 startFromEarliest 参数，指定从某个时间点开始读取数据。这样，Flink CDC 就会从该时间点开始读取所有数据，包括该时间点之前的数据。2023-09-20 10:32:47赞同 展开评论 打赏
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
相关问答
实时计算Flink版是阿里云提供的全托管Serverless Flink云服务，基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎，提高作业开发运维效率。
热门讨论
热门文章
FlinkCDC MySQL 中 scan.startup.mode 用的是什么模式啊？
3275
flink怎么能够快速消费kafka数据，需要设置什么参数呢？
1239
Caused by: org.apache.kafka.common.errors.TimeoutE
3040
Flink1.17为什么需要JDK 11呢？JDK8我试了也能运行
1626
Flink 集群重启后，所有的Jobs任务全都没有了。如果快速恢复所有的任务
1021
各位大佬请教个Flink问题，table.exec.state.ttl 和之间是否有什么联系？
984
编译失败，有知道怎么回事吗？
806
Flink sql将数组炸开，实现hive的explode函数的效果，还有什么其他好的方式？
1333
就是我在使用flink 将数据写入kafka 的时候出现错误，这个问题咋解决呀？
658
flinkcdc启动，怎么修改默认端口号，默认是8081。
1290
展开全部
权威详解 | 阿里新一代实时计算引擎 Blink，每秒支持数十亿次计算
24361
独家专访阿里集团副总裁贾扬清：我为什么选择加入阿里巴巴？
17583
Flink SQL 功能解密系列 —— 维表 JOIN 与异步优化
27766
Flume+Kafka+Flink+Redis构建大数据实时处理系统：实时统计网站PV、UV展示
23194
流计算精品翻译: The Dataflow Model
19236
Flink SQL 功能解密系列 —— 流式 TopN 挑战与实现
16582
基于实时计算（Flink）打造一个简单的实时推荐系统
14330
Flink Checkpoint 问题排查实用指南
13096
Flink SQL 功能解密系列 —— 流计算“撤回(Retraction)”案例分析
18391
如何正确使用 Flink Connector？
11323
展开全部
相关课程
更多
相关文章
相关电子书
更多
