开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

flinkcdc 采集pgsql,就连历史存量数据也采集不到,请问这个是什么原因?

flinkcdc 采集pgsql无主键表使用decodingPluginName = pgouput采集主键表可以采集到增量数据,但是采集不到无主键表的增量数据,使用其他插件decodingPluginName=decoderbufs就连历史存量数据也采集不到,请问这个是什么原因

展开
收起
wenti 2023-02-13 15:30:17 181 0
1 条回答
写回答
取消 提交回答
  • Flink CDC 无法采集 PostgreSQL 历史存量数据可能是由于以下原因:

    未启用逻辑解码:确保已在 PostgreSQL 数据库中启用逻辑解码。
    未创建复制槽:创建一个复制槽以捕获历史数据更改。
    Flink 作业配置不正确:检查 Flink CDC 作业的配置,确保已正确指定复制槽和起始时间戳。
    PostgreSQL 版本太低:Flink CDC 仅支持 PostgreSQL 10 或更高版本。
    防火墙或网络问题:确保 Flink 作业可以连接到 PostgreSQL 数据库。

    2024-02-26 16:16:10
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

热门讨论

热门文章

相关电子书

更多
低代码开发师(初级)实战教程 立即下载
冬季实战营第三期:MySQL数据库进阶实战 立即下载
阿里巴巴DevOps 最佳实践手册 立即下载