问题一:Flink CDC中mysql-cdc jar的最新版本是多少 我在哪可以下载呢?
Flink CDC中mysql-cdc jar的最新版本是多少 我在哪可以下载呢?
参考答案:
最新版本的flink-sql-connector-mysql-cdc jar不是直接可下载的,你需要最新版本的flink-sql-connector-mysql-cdc jar不是直接可下载的,你需要从Maven中央仓库获取。请注意,存在不同版本的jar包,例如flink-sql-connector-mysql-cdc-2.2.1.jar和flink-sql-connector-mysql-cdc-2.5-SNAPSHOT.jar等。其中,2.5-SNAPSHOT版本是开发分支release-XXX对应的快照版本,用户需要下载源代码并自行编译相应的jar包。对于已经发布的版本,可以直接在Maven中央仓库获取。
然而,需要注意的是,根据Flink的版本,你可能需要选择适合的CDC版本。例如,如果你使用的是Flink 1.14.3,那么对应的依赖版本应为flink-sql-connector-mysql-cdc-2.2-SNAPSHOT。另外,Flink CDC也提供了二进制发行版,你可以从官方网站或者Ververica GItHub页面上下载对应版本的二进制发行版并进行验证。
关于本问题的更多回答可点击进行查看:
https://developer.aliyun.com/ask/579943
问题二:Flink CDC升级mysql cdc为2.4.0版本,对于无主键表,但是增量数据进不来?
Flink CDC升级mysql cdc为2.4.0版本,对于无主键表,通过配置【scan.incremental.snapshot.chunk.key-column】可以全量同步了,但是增量数据进不来?
参考答案:
上面讨论有说明情况问题,输出端已经是3个并行度了刚刚好,但是全量source端并行度1不能加了,现在瓶颈在source端读取了;
关于本问题的更多回答可点击进行查看:
https://developer.aliyun.com/ask/579942
问题三:Flink CDC可以同步表结构嘛?
Flink CDC可以同步表结构嘛?
参考答案:
是的,Flink CDC确实支持数据的实时同步以及表结构变更的自动同步。在数据同步过程中,Flink CDC可以实时地将MySQL中的Schema变化同步到其他数据库中。更进一步,Flink CDC还支持多库多表同步或者分库分表合并模板实现数据同步。通过这样的方式,Flink CDC不仅降低了CDC数据入湖入仓的门槛,同时也解决了整库同步、表结构变更同步等问题。
关于本问题的更多回答可点击进行查看:
https://developer.aliyun.com/ask/579941
问题四:Flink CDC现在有个需求是mysql2mysql 全量➕增加 同步数据 想用cdc做?
Flink CDC现在有个需求是mysql2mysql
全量➕增加 同步数据 想用cdc做?
参考答案:
可以
关于本问题的更多回答可点击进行查看:
https://developer.aliyun.com/ask/579940
问题五:Flink CDC目前有整库同步吗?
Flink CDC目前有整库同步吗?
参考答案:
目前3.0 用pipeline有整库同步到doris和strarocks
关于本问题的更多回答可点击进行查看: