Flink CDC Oracle全量阶段速度有优化的空间么？
Flink CDC Oracle全量阶段速度有优化的空间么 目前测试1分钟10w 上亿的表有点太慢了？
展开
收起
1
条回答
写回答
写回答
-
全量是select，你可以从索引方面优化，其他方面优化不了，索引主键可以为数值类型， 字符要全扫，如果不是生产环境， 可以scan.incremental.snapshot.enabled = false， 就不会用watermarks的方式需要切片chunk了， 不用计算切片逻辑， 会快很多，代价是会锁表， 此时业务会挂，我找到debezium官网讲不锁表做全量初始化和增量查数据的技术文章，可以看看
https://debezium.io/blog/2021/10/07/incremental-snapshots/，此回答整理自钉群“Flink CDC 社区”2023-09-20 09:58:16赞同 展开评论 打赏
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
相关问答
实时计算Flink版是阿里云提供的全托管Serverless Flink云服务，基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎，提高作业开发运维效率。
热门讨论
热门文章
FlinkCDC MySQL 中 scan.startup.mode 用的是什么模式啊？
3275
flink怎么能够快速消费kafka数据，需要设置什么参数呢？
1239
Caused by: org.apache.kafka.common.errors.TimeoutE
3040
Flink1.17为什么需要JDK 11呢？JDK8我试了也能运行
1626
Flink 集群重启后，所有的Jobs任务全都没有了。如果快速恢复所有的任务
1021
各位大佬请教个Flink问题，table.exec.state.ttl 和之间是否有什么联系？
984
Flink sql将数组炸开，实现hive的explode函数的效果，还有什么其他好的方式？
1334
编译失败，有知道怎么回事吗？
806
就是我在使用flink 将数据写入kafka 的时候出现错误，这个问题咋解决呀？
658
flinkcdc启动，怎么修改默认端口号，默认是8081。
1290
展开全部
权威详解 | 阿里新一代实时计算引擎 Blink，每秒支持数十亿次计算
24361
独家专访阿里集团副总裁贾扬清：我为什么选择加入阿里巴巴？
17583
Flink SQL 功能解密系列 —— 维表 JOIN 与异步优化
27766
Flume+Kafka+Flink+Redis构建大数据实时处理系统：实时统计网站PV、UV展示
23194
流计算精品翻译: The Dataflow Model
19236
Flink SQL 功能解密系列 —— 流式 TopN 挑战与实现
16582
基于实时计算（Flink）打造一个简单的实时推荐系统
14330
Flink Checkpoint 问题排查实用指南
13096
Flink SQL 功能解密系列 —— 流计算“撤回(Retraction)”案例分析
18391
如何正确使用 Flink Connector？
11323
展开全部
相关课程
更多
相关文章
相关电子书
更多
