备案控制台
探索云世界
开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

我的这个Flink CDC CDC任务在抽取阶段，都不能获取，只能第一次全量，后面在增加数据就感知

我的这个Flink CDC CDC任务在抽取阶段，都不能获取，只能第一次全量，后面在增加数据就感知不到，是不是需要我在source端配置什么参数？image.png

展开
收起
雪哥哥 2022-12-04 22:15:20 322 0
1 条回答
写回答
取消 提交回答
  • 毛毛虫雨

    如果checkpoint确认配了，你检查下你的mysql有没有开启binlog（此答案整理自Flink CDC 社区）

    2022-12-05 07:52:04
    赞同 展开评论 打赏
问答分类：
流计算 实时计算 Flink版
问答标签：
实时计算 Flink版全量 实时计算 Flink版cdc数据 实时计算 Flink版数据 实时计算 Flink版cdc全量 实时计算 Flink版CDC
问答地址：
开发者社区 > 大数据与机器学习 > 实时计算 Flink > 问答
相关产品：
实时计算 Flink版

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

相关问答
实时计算 Flink版
Flink CDC里我这边抽mysql全量，还没抽完就自动停了可能是什么原因？
14
0
0
在Flink指定holo的binlog的offset也属于全量消费？
16
1
0
Flink CDC里pgsql中，全量阶段多个作业启动时，不能多个作业并行进行全量同步吗？
26
1
0
普通的Flink CDC任务，新加表后重启报状态不兼容，加这个参数会导致原有表重新全量拉取吗？
23
0
0
Flink CDC测试使用initial模式，使用savepoint停掉，不会做全量同步？
89
2
0
Flink CDC我全量同步mysql，75w，11G数据，TM给了2G，还是oom？
46
3
0
cdas动态加表出这个问题，是需要Flink重新全量同步解决吗？
14
1
0
Flink CDC里pg到pg数据同步全量可以成功，增量不行，还报了这个错误是为啥？
9
0
0
我的 kafka数据到目标表的作业 ，要进行 无状态 启动时。Flink是不是就没办法 全量同步
25
3
0
flink-cdc-mysql2.3和2.4能支持只做全量查询，然后结束任务吗？有这种参数配置吗？
12
0
0
大数据与机器学习

实时计算 Flink

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务，基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎，提高作业开发运维效率。

我要提问

相关产品

  • 实时计算 Flink版
    文档详情 产品详情

    • 热门讨论

    热门文章

  • FlinkCDC MySQL 中 scan.startup.mode 用的是什么模式啊？
    1702
  • flink1.15启动后无法访问webui的问题有人遇到过吗
    9727
  • Flink这个未授权访问漏洞有什么解决方案吗？
    420
  • Flink-CDC 文档网站地址是什么？
    18140
  • Caused by: org.apache.kafka.common.errors.TimeoutE
    2177
  • Flink 语句有啥方法不写字段能直接拥有源表的所有字段？
    732
  • Flink1.17为什么需要JDK 11呢？JDK8我试了也能运行
    663
  • 使用Flink CDC，生产环境要申请的服务器如何评估
    734
  • Flink withIdleness 如果一直没有数据进入会触发吗？
    159
  • flink任务报错: Job leader for job id 是啥原因导致的呢?
    841
    • 展开全部
  • 广告场景下的实时计算
    10907
  • Flink入坑指南第五章 - 语法糖 view
    3563
  • 官宣｜Apache Paimon 毕业成为顶级项目，数据湖步入实时新篇章！
    1102
  • flink cdc 同步问题之报错org.apache.flink.util.SerializedThrowable:如何解决
    341
  • 官宣｜Apache Flink 1.19 发布公告
    1622
  • 官宣｜阿里巴巴捐赠的 Flink CDC 项目正式加入 Apache 基金会
    1618
  • Flink CDC 3.0 正式发布，详细解读新一代实时数据集成框架
    100599
  • 阿里云实时计算Flink的产品化思考与实践【下】
    111122
  • 活动预告 | 5月16日 Streaming Lakehouse Meetup · Online 与你相约！
    132
  • Flink DataStream API 批处理能力演进之路
    233
    • 展开全部

    相关课程

    更多
  • Apache Flink 入门到实战 - Flink开源社区出品
    1392
    16
    去学习
  • 实时计算 Flink 版产品入门与实操
    3806
    10
    去学习
  • 开源 Flink 极速上手教程
    1752
    7
    去学习
  • 大数据实时计算框架Spark快速入门
    778
    93
    去学习
  • Apache Flink 入门
    4826
    9
    去学习

    • 相关文章

  • Java8 Lambda实现源码解析
  • 计及多能耦合的区域综合能源系统电气热能流计算（含matlab代码）
  • 基于OceanBase+Flink CDC，云粒智慧实时数仓演进之路
  • Storm详细配置
  • 大数据组件之storm简介

    • 相关电子书

    更多
    • Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载

    相关实验场景

    更多
  • 使用PolarDB-X与Flink搭建实时数据大屏
    188
    1.0小时
    去实验
  • 使用Flink实时发现最热Github项目
    846
    1.0小时
    去实验
  • 5分钟上手Flink MySQL连接器
    232
    1.0小时
    去实验
  • 基于Flink+Tair搭建实时监控大屏
    40
    1.0小时
    去实验
  • 基于Hologres+Flink搭建GitHub实时数据大屏
    41
    1.0小时
    去实验