开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

Flink CDC 里这个问题有人遇到没?

Flink CDC 里这个问题有人遇到没? flink on yarn job manager 可以启动, 但不给分配slot 。38ed49c2c596b047f6c0d7480ed8b3b4.png

展开
收起
小小鹿鹿鹿 2024-03-11 18:22:57 352 0
1 条回答
写回答
取消 提交回答
  • 北京阿里云ACE会长
    org.apache.flink.runtime.jobmanager.scheduler.NoResourceAvailableException: slot request bulk is not fulfillable! could not allocate the required slot within slot request timeout
    

    image.png

    问题原因

    作业JAR包中包含了不必要的依赖(例如基本配置、Flink、Hadoop和log4j依赖),造成依赖冲突从而引发各种问题。

    作业需要的Connector对应的依赖未被打入JAR包中。

    排查方法

    查看作业pom.xml文件,判断是否存在不必要的依赖。

    通过jar tf foo.jar命令查看作业JAR包内容,判断是否存在引发依赖冲突的内容。

    通过mvn dependency:tree命令查看作业的依赖关系,判断是否存在冲突的依赖。

    参考;https://help.aliyun.com/zh/flink/support/reference?spm=a2c4g.11186623.0.i2

    2024-03-11 21:50:02
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载