开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

postgresql可以从某个时间读取binlog,全量阶段会被跳过吗? 我就是想全量读取的时候少读

postgresql可以从某个时间读取binlog,全量阶段会被跳过吗? 我就是想全量读取的时候少读一些,我现在有3个亿的数据,读到最后几千万的时候,很慢,15秒才读5万。

展开
收起
十一0204 2023-04-05 09:41:22 176 0
1 条回答
写回答
取消 提交回答
  • 意中人就是我呀!

    pgsql可以限定全量读取的数据量,但是对增量没有效果。 6fb0656290b7fc301584038e7b30da40.png 看图,这两个参数可以写sql过滤数据量,对全量阶段有效,读完全量以后,继续读增量,不会对增量产生效果。此回答整理自钉群“Flink CDC 社区”

    2023-04-05 11:01:57
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关电子书

更多
金融级 PostgreSQL监控及优化 立即下载
PostgreSQL 物联网六脉神剑 立即下载
PostgreSQL在哈啰的实践-周飞 立即下载