开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

Flink 为什么这里映射的端口不是6123?

Flink kubernetes.hostnetwork.enabled=true为什么这里映射的端口不是6123f8168d3e366d0256433e3b9422995a31.png
然后造成taskmanager和jobmanager通信超时 任务自动cancel 有大佬了解吗?61325b5dca8d72e29563d124a13c85b8.png
正常应该会被识别到port才对9573c5ad260b1c21b1a082946953bfbd.png

展开
收起
真的很搞笑 2023-11-21 07:31:48 352 0
2 条回答
写回答
取消 提交回答
  • Flink在Kubernetes集群中运行时,会根据配置的端口映射规则将TaskManager和JobManager的Flink在Kubernetes集群中运行时,会根据配置的端口映射规则将TaskManager和JobManager的通信端口映射到宿主机上。如果发现端口映射不是预期的6123端口,可能是由于以下原因之一:

    1. 配置错误:请检查Flink的配置文件(flink-conf.yaml)中是否设置了正确的端口映射规则。确保kubernetes.jobmanager.service.portkubernetes.taskmanager.service.port的值分别为6123。

    2. 网络策略限制:Kubernetes集群可能具有网络策略限制,导致无法将端口映射到预期的6123端口。请检查集群的网络策略设置,并确保允许从TaskManager和JobManager所在的节点访问该端口。

    3. 资源竞争:如果其他应用程序或服务已经占用了6123端口,则可能导致端口映射失败。请确保没有其他应用程序或服务正在使用该端口。

    2023-11-21 15:36:24
    赞同 展开评论 打赏
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    在Flink中,6123是默认的RPC端口,用于集群间的通信。然而,在某些情况下,用户可能会选择更改这个端口,例如为了避免与其他服务的端口冲突。
    此外,还有一些其他的端口可能在Flink集群中使用,包括但不限于:

    • JobManager Web UI端口:默认为8081,用于展示Flink集群的状态和任务信息。
    • TaskManager DataPort端口:默认为6121,用于TaskManager接收和发送数据流。
    • ZooKeeper端口:默认为2181,用于协调Flink集群的状态和配置。

    因此,在使用Flink时,需要关注各个组件使用的端口,并确保它们不会发生冲突。如果遇到端口冲突的问题,可以尝试通过修改Flink的配置文件来更改端口设置。

    2023-11-21 14:24:29
    赞同 1 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载