在阿里云E-MapReduceon EKS上, 在同一个网络中,希望帮忙看下呢?

在阿里云E-MapReduceon EKS上, 在同一个网络中,我新开了个机器当driver,将emr master上的相关配置【SPARK_CONF_DIR, HADDOP_CONF_DIR】 同步到driver上,然后driver驱动spark 发生了 jindo-core ERROR ,希望群里大佬帮忙看下呢?
spark-shell --master yarn

Setting default log level to "WARN".
To adjust logging level use sc.setLogLevel(newLevel). For SparkR, use setLogLevel(newLevel).
java.lang.RuntimeException: Jindo Native loading failed: The platform is not support or jindo-core-$extends.jar is not install: linux/amd64/Ubuntu 22.04.1 LTS \n \l380aac961d1a925dbfd2c88445b8a92c.png

展开
收起
真的很搞笑 2023-09-13 17:00:03 296 发布于黑龙江 分享
分享
版权
举报
1 条回答
写回答
取消 提交回答
  • 您好,在阿里云 E-MapReduce on EKS 上,如果两个容器在同一个网络中,那么它们可以直接通过网络互相通信。但是,如果两个容器不在同一个网络中,那么它们就无法直接通过网络互相通信。

    如果您希望在两个不在同一个网络中的容器之间通信,您可以使用以下方法:

    使用 VPC Peering 连接两个 VPC。
    使用 NAT Gateway 将两个 VPC 连接到同一个网络。
    使用 VPN 连接两个 VPC。
    希望以上信息能对您有所帮助。

    2023-10-20 15:23:54 举报
    赞同 评论

    评论

    全部评论 (0)

    登录后可评论

阿里云EMR是云原生开源大数据平台,为客户提供简单易集成的Hadoop、Hive、Spark、Flink、Presto、ClickHouse、StarRocks、Delta、Hudi等开源大数据计算和存储引擎,计算资源可以根据业务的需要调整。EMR可以部署在阿里云公有云的ECS和ACK平台。

还有其他疑问?
咨询AI助理
AI助理

你好,我是AI助理

可以解答问题、推荐解决方案等