开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

cdc这边会报错,将会从头开始读数据,这个问题如何解决?

mongodb 磁盘原因导致触发oplog清理机制,cdc这边会报错,将会从头开始读数据,这个问题如何解决? Caused by: com.mongodb.MongoCommandException: Command failed with error 280 (ChangeStreamFatalError): 'cannot resume stream; the resume token was not found. {_data: "8263336512000001372B022C0100296E5A1004F86ACE47D772425DB8F3947F3C3FC4B246645F6964006463336512AEC74D14C2CECEA00004"}' on server 172.31.8.70:3717. The full response is

展开
收起
游客6vdkhpqtie2h2 2022-09-29 10:32:07 753 0
1 条回答
写回答
取消 提交回答
  • 这个就相当于binlog被删掉了,没法恢复,只能重跑了。 oplog的大小在生产环境还是推荐多预留一些。(此答案整理自Flink CDC 社区)

    2022-09-29 11:04:22
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关电子书

更多
面向失败设计 立即下载
Apache Flink 流式应用中状态的数据结构定义升级 立即下载
HareQL:快速HBase查询工具的发展过程 立即下载