Flink CDC大家有遇到这个异常,可能是啥原因?

Flink CDC大家有遇到这个异常,可能是啥原因? 图片.png

展开
收起
wenti 2023-01-29 17:22:36 185 分享 版权
1 条回答
写回答
取消 提交回答
  • 异常:

    java.lang.RuntimeException: Failed to deserialize Debezium message.
    Caused by: com.fasterxml.jackson.databind.exc.MismatchedInputException: Cannot deserialize instance of int out of START_ARRAY token
    可能原因:

    此异常通常是由 Debezium 事件中的数据类型与 Oracle 表中的数据类型不兼容造成的。具体来说,该异常表明 Debezium 事件中的某个字段被表示为数组,而 Oracle 表中的对应字段是一个标量值(例如整数)。

    解决步骤:

    检查 Oracle 表的列数据类型:确保 Oracle 表中涉及的列数据类型与 Debezium 事件中声明的数据类型兼容。例如,Oracle 中的 INT 类型应该映射到 Debezium 事件中的 long 类型。
    使用 Debezium Schema Registry 验证模式:可以使用 Debezium 提供的 Debezium Schema Registry 来验证 Oracle 表的模式是否与 Debezium 事件兼容。
    在 Flink 作业中打印事件:可以在 Flink 作业中使用 Flink SQL 的 PRINT 语句 来检查 Debezium 事件的格式。
    重新部署作业:在进行上述更改后,重新部署 Flink 作业。
    其他提示:

    请确保您使用的是 正确的 Debezium 版本,并且它与 Flink CDC 连接器版本兼容。
    请确保您使用的是 正确的 JSON 解析器。Debezium 使用 Jackson JSON 解析器,因此您需要在 Flink 作业中配置它。
    如果您仍然遇到问题,请提供更多详细信息,例如 Flink 作业的代码、Debezium 连接器配置和 Oracle 表的模式。

    2024-02-26 16:32:37
    赞同 展开评论

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

收录在圈子:
实时计算 Flink 版(Alibaba Cloud Realtime Compute for Apache Flink,Powered by Ververica)是阿里云基于 Apache Flink 构建的企业级、高性能实时大数据处理系统,由 Apache Flink 创始团队官方出品,拥有全球统一商业化品牌,完全兼容开源 Flink API,提供丰富的企业级增值功能。
还有其他疑问?
咨询AI助理