开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

flink16.2,perjob提交给yarn,一会成功一会不成功的为啥子?

flink16.2,perjob提交给yarn,一会成功一会不成功的为啥子?报错显示无法连接yarn- Connecting to ResourceManager at /0.0.0.0:8030

展开
收起
真的很搞笑 2024-01-23 15:48:24 77 0
2 条回答
写回答
取消 提交回答
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    这个问题可能是由于Flink和YARN之间的连接问题导致的。以下是一些可能的原因:

    1. YARN ResourceManager无法访问:请确保YARN ResourceManager正在运行,并且可以从Flink所在的机器上访问到它。你可以尝试使用telnet命令测试连接:telnet <ResourceManager IP> 8030。如果无法连接,请检查防火墙设置以及网络配置。

    2. Flink配置错误:请检查Flink的配置文件(flink-conf.yaml)中的YARN相关配置是否正确。特别是yarn.application-master.portyarn.heartbeat-delay等参数。

    3. YARN集群资源不足:请检查YARN集群的资源是否足够支持你的作业。如果资源不足,可能会导致作业提交失败。

    4. Flink与YARN版本不兼容:请确保Flink和YARN的版本是兼容的。你可以查看官方文档或者在GitHub上查找相关版本信息。

    5. 其他原因:还可能是由于其他因素导致的,例如操作系统限制、文件权限问题等。

    建议你检查以上可能的原因,并尝试解决问题。如果问题仍然存在,可以查看Flink和YARN的日志以获取更多详细信息。

    2024-01-23 21:50:59
    赞同 展开评论 打赏
  • 为啥子捏

    2024-01-23 17:40:06
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载