在阿里云E-MapReduceon EKS上， 在同一个网络中，希望帮忙看下呢？
在阿里云E-MapReduceon EKS上， 在同一个网络中，我新开了个机器当driver，将emr master上的相关配置【SPARK_CONF_DIR, HADDOP_CONF_DIR】 同步到driver上，然后driver驱动spark 发生了 jindo-core ERROR ，希望群里大佬帮忙看下呢？
spark-shell --master yarn
Setting default log level to "WARN".
To adjust logging level use sc.setLogLevel(newLevel). For SparkR, use setLogLevel(newLevel).
java.lang.RuntimeException: Jindo Native loading failed: The platform is not support or jindo-core-$extends.jar is not install: linux/amd64/Ubuntu 22.04.1 LTS \n \l
写回答
-
您好，在阿里云 E-MapReduce on EKS 上，如果两个容器在同一个网络中，那么它们可以直接通过网络互相通信。但是，如果两个容器不在同一个网络中，那么它们就无法直接通过网络互相通信。
如果您希望在两个不在同一个网络中的容器之间通信，您可以使用以下方法：
使用 VPC Peering 连接两个 VPC。
使用 NAT Gateway 将两个 VPC 连接到同一个网络。
使用 VPN 连接两个 VPC。
希望以上信息能对您有所帮助。2023-10-20 15:23:54赞同 展开评论 打赏
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
阿里云EMR是云原生开源大数据平台，为客户提供简单易集成的Hadoop、Hive、Spark、Flink、Presto、ClickHouse、StarRocks、Delta、Hudi等开源大数据计算和存储引擎，计算资源可以根据业务的需要调整。EMR可以部署在阿里云公有云的ECS和ACK平台。
热门讨论
热门文章
相关课程
更多
相关电子书
更多
