AI 助理
备案控制台
开发者社区 大数据与机器学习 实时计算 Flink 正文

为啥我用flink cdc没有监听到mysql的数据变化呢?

为啥我用flink cdc没有监听到mysql的数据变化呢?

展开
收起
wenti 2023-02-27 19:04:46 597 分享 版权

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

1 条回答
写回答
取消 提交回答
  • 六月的雨在钉钉
    从事java行业9年至今，热爱技术，热爱以博文记录日常工作，csdn博主，座右铭是：让技术不再枯燥，让每一位技术人爱上技术

    实时计算flink 没有监听到mysql数据变化有两种可能： 1.MySQL CDC在做全量读到增量读的切换时，如果全量读是多并发，则在进入增量前要多等一个Checkpoint，来确保全量的数据已经写入到下游后再读取增量数据，从而保证数据的正确性。但是，如果你设置的Checkpoint间隔时间比较大，例如20分钟，则会导致作业20分钟后才开始同步增量数据。因此，你需要根据业务情况设置合理的Checkpoint间隔时间。 2.如果你使用的是RDS MySQL 5.6只读实例，该类型实例提供的binlog文件是经过简化的，日志中不包含数据，是无法读取到增量阶段的数据的。因此，这种情况建议你使用可写实例或者升级RDS MySQL至更高版本。

    2023-02-27 20:26:31
    赞同 展开评论
问答分类：
关系型数据库 MySQL 流计算 实时计算 Flink版 云数据库 RDS MySQL 版
问答标签：
云数据库 RDS MySQL 版数据 实时计算 Flink版数据 实时计算 Flink版CDC 实时计算 Flink版cdc数据 实时计算 Flink版mysql
问答地址：
开发者社区 > 大数据与机器学习 > 实时计算 Flink > 问答
相关问答
实时计算 Flink版
FlinkCDC监听Mysql binlog，建立链接不会释放
145
1
0
flink cdc同步一张mysql按天分表数据，能否监听到 mysql 源端的这两个操作？
139
1
0
flink cdc 监听 发送数据到rocketmq ，但是运行一段时间后发送失败 怎么办?
98
0
0
在Flink CDC中，一直在监听和同步，实际上源端已经不产生数据了，这种任务就应该停止掉吧？
96
1
0
在Flink CDC中用3.1.1版本监听schema，出现中文乱码，这个有什么解决方案吗？
129
0
0
Flink CDC监听不到mysql数据增量变更
131
0
0
在Flink CDC中通过cdc监听到的数据自动转换时间戳了，这么需要怎么处理下？
94
0
0
在Flink CDC中oraclecdc 有设置监听间隔时间的参数吗？
108
1
0
在Flink CDC中oraclecdc 监听新增的数据，有监听到重复的数据有解决方案吗？
123
1
0
Flink CDC可以配置不监听DDL操作吗？
71
0
0
大数据与机器学习

实时计算 Flink

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务，基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎，提高作业开发运维效率。

我要提问
收录在圈子:
阿里云实时计算Flink
199212
+ 订阅
实时计算 Flink 版（Alibaba Cloud Realtime Compute for Apache Flink，Powered by Ververica）是阿里云基于 Apache Flink 构建的企业级、高性能实时大数据处理系统，由 Apache Flink 创始团队官方出品，拥有全球统一商业化品牌，完全兼容开源 Flink API，提供丰富的企业级增值功能。

相关文章

  • 基于python的医院智慧门诊系统研究
  • 基于python+vue的商城购物系统
  • MySQL多表练习笔记
  • Flink Agents：基于Apache Flink的事件驱动AI智能体框架
  • Spring事务传播机制：7种姿势教你玩转"事务接力赛"

    • 热门讨论

    热门文章

  • Flink CDC任务从savepoint/checkpoints状态中恢复作业错误问题
  • 请问如何用flink sql客户端用yarn application模式提交任务呢？
  • 请问下大家有没有遇到过这个错:Caused by: java.lang.ClassNotFoundE
  • flink的1cu是指1cpu还是1cpu+4g存储？
  • FlinkCDC MySQL 中 scan.startup.mode 用的是什么模式啊？
  • 在斗鱼，实时计算发展的历程如何？
  • Flink-CDC 文档网站地址是什么？
  • Flink CDC中，有哪位大佬有flink 版本和cdc版本的适配统计啊？
  • flink-CDC-3.0 mysql to doris 数据同步任务 经常报错
  • Flink为什么会随着时间增加busy会大？
    • 展开全部
  • 使用 Kafka 和 Flink 构建实时数据处理系统
  • 【阿里内部应用】利用blink CEP实现流计算中的超时统计问题
  • Apache Flink 进阶（八）：详解 Metrics 原理与实战
  • 基于实时计算（flink）打造舆情分析平台——新华智云
  • Flink SQL 系列 | 5 个 TableEnvironment 我该用哪个？
  • 使用Blink SQL+UDAF实现差值聚合计算
  • 祝贺！两位 Apache Flink PMC 喜提 Apache Member
  • 如何在 Flink 中规划 RocksDB 内存容量？
  • Flink CDC：新一代实时数据集成框架
  • Flink 基础详解：大数据处理的强大引擎
    • 展开全部
    还有其他疑问?
    咨询AI助理