备案控制台
探索云世界
开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

务启动后会将数据库存量数据一次性导入，但是增量数据要过20分钟才会开始同步，之后的数据都是实时同步，

使用Flink-sql-cdc-mysql-2.1.1作为source，Flink-sql-cdc-tidb-2.2.0作为sink。想要做全增量一体化数据库同步，出现以下情况 ：任务启动后会将数据库存量数据一次性导入，但是增量数据要过20分钟才会开始同步，之后的数据都是实时同步，这是什么原因呢？

展开
收起
爱喝咖啡嘿 2022-12-20 14:43:03 143 1
2 条回答
写回答
取消 提交回答
  • 游客d4dmjuyzwwnma

    是的

    2022-12-22 15:23:17
    赞同 展开评论 打赏
  • 范zzhaha

    是不是checkpoint设置的20分钟——此答案整理自钉群“Flink CDC 社区”

    2022-12-21 13:50:21
    赞同 展开评论 打赏
问答分类：
实时计算 Flink版 云数据库 RDS MySQL 版
问答标签：
数据库数据 数据库导入 数据库同步 数据库实时同步 数据库数据增量
问答地址：
开发者社区 > 大数据与机器学习 > 实时计算 Flink > 问答

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

相关问答
实时计算 Flink版
数据传输DTS可以将其他账号的数据库 实时同步到自己的数据库吗？
65
6
0
云数据仓库ADBADB数仓版本支持rdb数据库同步吗？实时同步数据。
50
2
0
dataworks如何实时同步数据库数据？
262
3
0
在OceanBase数据库，两个集群之间数据如何做实时同步？
8
1
0
大数据计算MaxCompute实时同步任务需要源数据库进行什么配置不？有什么要求？
18
4
0
OceanBase数据库OB的数据库同步，支持实时同步到非OB的数据库么？
32
1
0
OceanBase数据库中可不可以通过oms实现Oracle和ob之间的实时同步？
114
2
0
Flink CDC里对于经常水平扩展的分布式数据库，实时同步，在扩展数据库分片节点，可以直接加源吗？
16
0
0
数据传输DTS后端 数据库连接 切换到 实时同步的目标库上 吗?
28
4
0
我想用db2的cdc实时同步整个数据库，怎么配置呀？
24
3
0
大数据与机器学习

实时计算 Flink

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务，基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎，提高作业开发运维效率。

我要提问

热门讨论

热门文章

  • flinkcdc3.0整库同步mysql的数据到starrocks中全量能过去增量过不去怎么排查？
    277
  • FlinkCDC MySQL 中 scan.startup.mode 用的是什么模式啊？
    1545
  • Flink-CDC 文档网站地址是什么？
    18083
  • 哪位大佬有遇到过Flink这个问题呢？同步pg的时候，是不是类冲突了，所以导致抓不到这个类？
    1254
  • Flink1.17为什么需要JDK 11呢？JDK8我试了也能运行
    597
  • 使用Flink CDC，生产环境要申请的服务器如何评估
    683
  • flink1.15启动后无法访问webui的问题有人遇到过吗
    9633
  • Caused by: org.apache.kafka.common.errors.TimeoutE
    2103
  • flink 1.18必须配套JDK11吗 1.8是不是不行了呢？
    764
  • 现在flink消费kafka限速是怎么做的?
    285
    • 展开全部
  • Flink+Paimon+Hologres 构建实时湖仓数据分析
    71452
  • 数据仓库介绍与实时数仓案例
    40021
  • 权威详解 | 阿里新一代实时计算引擎 Blink，每秒支持数十亿次计算
    22044
  • 分布式Snapshot和Flink Checkpointing简介
    18941
  • 实时计算 Flink SQL 核心功能解密
    18523
  • Flink SQL 功能解密系列 —— 维表 JOIN 与异步优化
    26146
  • 流计算StreamCompute
    18126
  • 通过Flink实时构建搜索引擎的索引
    16782
  • Flume+Kafka+Flink+Redis构建大数据实时处理系统：实时统计网站PV、UV展示
    21428
  • 阿里云实时计算产品案例&解决方案汇总
    24273
    • 展开全部

    相关课程

    更多
  • 数据库的前世今生
    2980
    2
    去学习
  • 数据库核心概念
    1666
    7
    去学习
  • 从传统数据库到云数据库演进
    594
    1
    去学习
  • 数据库常见问题排查
    397
    2
    去学习
  • 数据库及SQL/MySQL基础
    5459
    22
    去学习
  • 高校精品课-西安交通大学 -数据库理论与技术
    451
    9
    去学习

    • 相关文章

  • [尚硅谷flink学习笔记] 实战案例TopN 问题
  • [尚硅谷 flink] 状态管理 笔记
  • [尚硅谷flink] 检查点笔记
  • xiaodisec day025
  • MySQL 存储引擎

    • 相关电子书

    更多
    • 2022 DTCC-阿里云一站式数据库上云最佳实践 立即下载
    云时代的数据库技术趋势 立即下载
    超大型金融机构国产数据库全面迁移成功实践 立即下载

    相关实验场景

    更多
  • PolarDB for AI：在数据库中通过SQL实现AI能力
    319
    1.0小时
    去实验
  • 云原生HTAP数据库，让你的交易和分析一库搞定
    122
    1.0小时
    去实验
  • Excel文件转存到RDS数据库
    5723
    2.0小时
    去实验
  • 快速体验PolarDB开源数据库
    6591
    2.0小时
    去实验
  • 手把手教你把IoT传感器数据存储到数据库
    2798
    1.0小时
    去实验
  • WorkBench操作云上数据库
    2450
    3.0小时
    去实验