开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

Flink CDC里 source tidb 报错怎么办呀?

Flink CDC里 source tidb 报错怎么办呀? org.tikv.shade.com.fasterxml.jackson.databind.exc.UnrecognizedPropertyException: Unrecognized field "AuthPlugin"

展开
收起
小小鹿鹿鹿 2024-02-06 19:47:23 75 0
1 条回答
写回答
取消 提交回答
  • 在 Apache Flink CDC 中使用 TiDB 作为数据源时,如果遇到 org.tikv.shade.com.fasterxml.jackson.databind.exc.UnrecognizedPropertyException: Unrecognized field "AuthPlugin" 这样的错误,通常表示 JSON 解析器在反序列化 TiDB 返回的信息时遇到了未知字段("AuthPlugin")。

    这是因为 Flink CDC 的 TiDB 连接器在解析 TiKV 或 PD 返回的 JSON 结构时,未预期到 "AuthPlugin" 这个属性。可能的原因包括:

    1. 版本不兼容:如果你使用的 Flink CDC 版本与 TiDB 版本之间存在不兼容的情况,某些新引入的字段可能会在旧版连接器中无法识别。

    2. 连接器配置问题:TiDB 的连接配置中包含了不受连接器支持的新特性或选项。

    3. TiDB 端的变更:TiDB 服务端的接口发生了变化,增加了新的字段,而 Flink CDC 的 TiDB 连接器尚未更新以支持该字段。

    解决方法:

    • 升级 Flink CDC 版本:确保使用的 Flink CDC 版本与正在运行的 TiDB 版本相兼容,特别是 TiDB CDC 插件的版本。

    • 检查连接配置:确保在 Flink CDC 中配置 TiDB 数据源时,没有启用不受支持的高级选项或特性。

    • 临时解决方案:如果快速解决问题至关重要,可以尝试修改 Flink CDC 连接器中的 JSON 序列化/反序列化代码,忽略或适配“AuthPlugin”字段,但这不是长久之计。

    2024-02-12 11:48:00
    赞同 1 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载