开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

flink cdc oracle。跑了一段时间。突然报这个错误 ,有哪位遇到过吗?

flink cdc oracle。跑了一段时间。突然报这个错误 ,有哪位大佬遇到过吗??io.debezium.DebeziumException: Online REDO LOG files or archive log files do not contain the offset scn 17220098076542. Please perform a new snapshot.

展开
收起
真的很搞笑 2023-08-29 12:18:39 528 0
1 条回答
写回答
取消 提交回答
  • 这个错误提示表明 Flink CDC 在连接 Oracle 数据库时发现当前的在线重做日志文件或归档日志文件不包含指定的 scn(系统改变号),导致无法找到正确的偏移量。这可能是由于数据库配置或日志文件切换等原因引起的。以下是可能的解决方案:

    执行新的快照(Snapshot):根据错误提示,建议执行一个新的快照操作。这可以通过在 Flink CDC 任务中配置 "snapshot.mode": "initial" 来实现。这将重新开始从头开始读取 Oracle 数据库中的变更数据。

    检查归档日志文件:确保 Oracle 数据库的归档日志文件可用且正确配置。如果归档日志文件不可用或配置有误,可能会导致偏移量无法找到。可以尝试启用归档日志或确保归档日志目录正确配置。

    检查数据库配置和权限:确保数据库配置正确,并且 Flink CDC 连接的用户具有足够的权限来访问和读取归档日志文件。可以尝试使用具有更高权限的用户进行连接。

    检查 Flink CDC 配置:确保在 Flink CDC 任务的配置中正确设置了 Oracle 数据库的连接信息、日志模式等参数。请参考 Flink 和 Debezium 的官方文档和示例来正确配置和使用 Flink CDC。

    2023-09-18 17:37:27
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    PostgresChina2018_樊文凯_ORACLE数据库和应用异构迁移最佳实践 立即下载
    PostgresChina2018_王帅_从Oracle到PostgreSQL的数据迁移 立即下载
    Oracle云上最佳实践 立即下载

    相关镜像