备案控制台
探索云世界
开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

flink cdc全量读阶段重复采集数据是什么问题？

flink cdc全量读阶段重复采集数据是什么问题，taskmanager和jobmanager是么有失败重启的 图片.png 图片.png

展开
收起
游客uu65yiq7myioi 2023-02-27 12:12:10 271 0
1 条回答
写回答
取消 提交回答
  • 665661

    重新从头跑就行了——该回答整理自钉群“Flink CDC 社区”

    2023-02-27 20:22:00
    赞同 展开评论 打赏
问答分类：
流计算 实时计算 Flink版
问答标签：
实时计算 Flink版数据 实时计算 Flink版cdc数据 实时计算 Flink版全量 实时计算 Flink版cdc全量 实时计算 Flink版采集
问答地址：
开发者社区 > 大数据与机器学习 > 实时计算 Flink > 问答
相关产品：
实时计算 Flink版

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

相关问答
实时计算 Flink版
Flink CDC里最近遇到一些表无法先全量再增量同步，具体表现就是启动任务后，一直没数据怎么办？
16
0
0
flink cdc 采集oracle 间歇性丢数据，日志里也没报错的情况，怎么回事？
39
0
0
flink cdc采集计算postgresql会默认创建一个插槽，怎么样连接插槽集？
40
1
0
Flink CDC里pgsql中，全量阶段多个作业启动时，不能多个作业并行进行全量同步吗？
25
1
0
Flink CDC全量和增量同步数据如何保证数据的一致性
278
5
0
Flink CDC里这个已经是增量了，全量阶段都结束一个礼拜了报的,怎么办啊？
11
0
0
如何保障flink cdc采集任务能在MySQL 多个备库中？
8
0
0
flink cdc采集mysql after中只有不会null的字段要怎样处理？
18
0
0
Flink的binlog文件太多,导致全量后的增量阶段追赶很慢,这个有办法解决吗？
21
1
0
Flink CDC里 oracle 2.4.2支持全量读取无主键的oracle表吗？
17
0
0
大数据与机器学习

实时计算 Flink

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务，基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎，提高作业开发运维效率。

我要提问

相关产品

  • 实时计算 Flink版
    文档详情 产品详情

    • 热门讨论

    热门文章

  • flinkcdc3.0整库同步mysql的数据到starrocks中全量能过去增量过不去怎么排查？
    267
  • FlinkCDC MySQL 中 scan.startup.mode 用的是什么模式啊？
    1541
  • Flink-CDC 文档网站地址是什么？
    18079
  • 哪位大佬有遇到过Flink这个问题呢？同步pg的时候，是不是类冲突了，所以导致抓不到这个类？
    1254
  • Flink1.17为什么需要JDK 11呢？JDK8我试了也能运行
    597
  • 使用Flink CDC，生产环境要申请的服务器如何评估
    681
  • flink1.15启动后无法访问webui的问题有人遇到过吗
    9631
  • Caused by: org.apache.kafka.common.errors.TimeoutE
    2100
  • flink web UI 是不是本身不支持登录认证，必须通过nginx来加登录认证？
    485
  • 请问flink-connector-jdbc在sink时，如何设置批量写入？
    2139
    • 展开全部
  • Flink+Paimon+Hologres 构建实时湖仓数据分析
    71446
  • 数据仓库介绍与实时数仓案例
    40017
  • 权威详解 | 阿里新一代实时计算引擎 Blink，每秒支持数十亿次计算
    22044
  • 分布式Snapshot和Flink Checkpointing简介
    18941
  • 实时计算 Flink SQL 核心功能解密
    18523
  • Flink SQL 功能解密系列 —— 维表 JOIN 与异步优化
    26146
  • 流计算StreamCompute
    18126
  • 通过Flink实时构建搜索引擎的索引
    16782
  • Flume+Kafka+Flink+Redis构建大数据实时处理系统：实时统计网站PV、UV展示
    21426
  • 阿里云实时计算产品案例&解决方案汇总
    24272
    • 展开全部

    相关课程

    更多
  • 大数据Flink实时旅游平台环境篇 2020版
    582
    29
    去学习
  • Apache Flink 入门到实战 - Flink开源社区出品
    1392
    16
    去学习
  • 实时计算 Flink 版产品入门与实操
    3806
    10
    去学习
  • 开源 Flink 极速上手教程
    1752
    7
    去学习
  • 大数据实时计算框架Spark快速入门
    778
    93
    去学习
  • Apache Flink 入门
    4826
    9
    去学习

    • 相关文章

  • [尚硅谷 flink] 基于时间的合流——双流联结
  • [尚硅谷flink学习笔记] 实战案例TopN 问题
  • [尚硅谷 flink] 状态管理 笔记
  • [尚硅谷flink] 检查点笔记
  • 阿里巴巴瓴羊基于 Flink 实时计算的优化和实践

    • 相关电子书

    更多
    • Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载

    相关实验场景

    更多
  • 使用PolarDB-X与Flink搭建实时数据大屏
    185
    1.0小时
    去实验
  • 使用Flink实时发现最热Github项目
    835
    1.0小时
    去实验
  • 5分钟上手Flink MySQL连接器
    220
    1.0小时
    去实验
  • 基于Flink+Tair搭建实时监控大屏
    35
    1.0小时
    去实验
  • 基于Hologres+Flink搭建GitHub实时数据大屏
    26
    1.0小时
    去实验