AI 助理
备案控制台
开发者社区 大数据与机器学习 实时计算 Flink 正文

各位大佬，请教个问题，flink cdc任务启动抽取pg的存量数据时，支持指定offset或者？

问题1:各位大佬，请教个问题，flink cdc任务启动抽取pg的存量数据时，支持指定offset或者timestamp去抽取吗？ 问题2:flink cdc的最新版本（2.3）抽取存量数据时直接查询的表（snapshot）而不是读wal日志，所以没办法指定offset和timestamp是吧

展开
收起
真的很搞笑 2023-06-29 08:16:46 126 分享 版权

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

1 条回答
写回答
取消 提交回答
  • 芯在这

    回答1:不支持 回答2:flink-pgsql-cdc不支持哦，仅支持全量和最新增量，此回答整理自钉群“Flink CDC 社区”

    2023-06-29 09:00:31
    赞同 展开评论
问答分类：
关系型数据库 流计算 实时计算 Flink版 日志服务
问答标签：
实时计算 Flink版CDC 实时计算 Flink版任务 实时计算 Flink版数据 实时计算 Flink版cdc数据 实时计算 Flink版pg
问答地址：
开发者社区 > 大数据与机器学习 > 实时计算 Flink > 问答
相关问答
实时计算 Flink版
在Flink CDC中人大金仓可以兼容PG的wal2json和Decoderbufs插件不？
1071
7
0
在Flink CDC中,SQL server 3.1.1，无法从存量切到CDC增量，有啥解决方案吗?
145
0
0
在Flink CDC中pg 有这个告警 这个应该设置成false？
136
0
0
Flink线上存量的作业怎么拉取呢？
75
1
0
在Flink CDC中数据同步过程中 mysql有几何字段 这种一般怎么同步到pg数据库呢？
148
0
0
在Flink CDC中oracle 到pg 的实时同步 稳定性能怎么样?
103
0
0
在Flink CDC中fkinkcdc可以实现mysql到pg数据库的实时同步吗?
100
0
0
Flink pg cdc 如果pg表一天没有数据写入会导致pg的wal日志越来越大有什么解决思路么？
278
5
0
Flink CDC里使用initial模式, 转增量之后，存量数据会丢吗？
118
0
0
Flink CDC里有没有遇到pg使用 sys_dump 命令备份后，会导致报错的？
110
0
0
大数据与机器学习

实时计算 Flink

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务，基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎，提高作业开发运维效率。

我要提问

相关文章

  • 2026基于springboot的人力资源管理系统
  • 数据慢半拍，问题可能不在“数据”：聊聊数据传播延迟的那些坑
  • 开箱即用的 GoWind Admin｜风行，企业级前后端一体中后台框架：分层设计的取舍之道（从 “简单粗暴” 到依赖倒置）
  • 基于springboot的小区维修管理系统
  • Postgresql入门之psql用法详解（三）- 元命令详解（\dconfig-\if）

    • 热门讨论

    热门文章

  • Flink1.17为什么需要JDK 11呢？JDK8我试了也能运行
  • Flink CDC任务从savepoint/checkpoints状态中恢复作业错误问题
  • Flink CDC 人大金仓能作为source吗？ 支持bin-log吗？
  • Flink CDC把主表先全量同步到索引中 更新到索引中 这种怎么搞？
  • flink cdc source端能降低消费速度嘛？
  • flink cdc同步的源表，一定要有主键么？
  • 我使用flink cdc StartupOptions.latest() 采最新的日志。要是程序挂了
  • flink datastream ，向clickhouse插入数据时 怎么关闭插入时更新,
  • 请问一下Flink mysqlcdc获取到数据之后 关联结果不更新 这个怎么办?
  • Flink CDC有知道Mac m1下的docker 环境如何开启sqlserver代理吗？
    • 展开全部
  • 数据仓库介绍与实时数仓案例
  • 独家专访阿里集团副总裁贾扬清：我为什么选择加入阿里巴巴？
  • Flume+Kafka+Flink+Redis构建大数据实时处理系统：实时统计网站PV、UV展示
  • 阿里云实时计算产品案例&解决方案汇总
  • Flink Checkpoint 问题排查实用指南
  • 史上超强阵容！大数据及人工智能领域顶级盛会，Flink Forward Asia 2019 不容错过！
  • Flink SQL 功能解密系列 —— 流计算“撤回(Retraction)”案例分析
  • 如何正确使用 Flink Connector？
  • 如何在 PyFlink 1.10 中自定义 Python UDF？
  • Flink SQL 功能解密系列 —— 数据去重的技巧和思考
    • 展开全部
    还有其他疑问?
    咨询AI助理