开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

实时计算 Flink版这是什么原因导致的啊?

实时计算 Flink版这是什么原因导致的啊?7ffc4c81bf6b57ae0d47fd3f843daa6d.png

展开
收起
真的很搞笑 2023-10-18 17:24:22 49 0
1 条回答
写回答
取消 提交回答
  • 你的问题可能是由于 Flink 的类加载策略导致的。Flink 支持两种类加载策略:child-first 和 parent-first。默认情况下,Flink 使用 child-first 策略,即优先使用用户代码类加载器加载类,如果找不到,则委托给父类加载器。这样可以避免用户代码和 Flink 框架之间的类冲突。但是,如果用户代码中使用了一些 Flink 框架依赖的第三方库,并且版本不一致,就可能出现类加载异常或者方法找不到等错误。为了解决这个问题,你可以尝试以下方法:

    • 将 Flink 的类加载策略改为 parent-first,即优先使用父类加载器加载类,如果找不到,则使用用户代码类加载器。这样可以避免用户代码和 Flink 框架之间的版本冲突,但是可能会导致一些 Flink 的特性无法正常使用。可以在 flink-conf.yaml 中设置 classloader.resolve-order: parent-first 来启用这个策略。
    • 将用户代码中使用的第三方库的版本和 Flink 框架依赖的版本保持一致,或者尽量避免使用和 Flink 框架有冲突的第三方库。
    • 使用 shade 插件对用户代码中的第三方库进行重命名,以避免和 Flink 框架的类名冲突。
    2023-10-24 13:24:52
    赞同 1 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    低代码开发师(初级)实战教程 立即下载
    冬季实战营第三期:MySQL数据库进阶实战 立即下载
    阿里巴巴DevOps 最佳实践手册 立即下载