开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

flink cdc 设置 sqlserver数据库 表140W条数据 直接写入 postgres

flink cdc 设置 sqlserver数据库 表140W条数据 直接写入 postgres数据库insert into TMATTOWORK_test2 select * from TMATTOWORK;数据插入postgres表80万条后报错,然后插入100W条后第二次报错--报错org.apache.flink.util.FlinkRuntimeException: Exceeded checkpoint tolerable failure threshold.这种是什么原因呢,数据有问题吗,又不没有sql错误原因提示

6b6cc61fed4245b172807a864b4686fd.png

展开
收起
十一0204 2023-04-05 09:47:20 278 0
1 条回答
写回答
取消 提交回答
  • 意中人就是我呀!

    全量阶段没法做ck,然后你的ck允许的失败次数也没做,所以导致任务失败。 8b7ef330f1e2030279a19dd85157f9f6.png 此回答整理自钉群“Flink CDC 社区”

    2023-04-05 11:08:11
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载