./start-all.sh启动spark集群报错?报错-问答-阿里云开发者社区-阿里云

开发者社区> 问答> 正文

./start-all.sh启动spark集群报错?报错

爱吃鱼的程序员 2020-06-07 16:55:04 76
[root@localhost sbin]# ./start-all.sh 
starting org.apache.spark.deploy.master.Master, logging to /usr/local/spark/logs/spark-root-org.apache.spark.deploy.master.Master-1-localhost.localdomain.out
failed to launch org.apache.spark.deploy.master.Master:
  	at java.lang.ClassLoader.loadClass(ClassLoader.java:358)
  	... 6 more
full log in /usr/local/spark/logs/spark-root-org.apache.spark.deploy.master.Master-1-localhost.localdomain.out
master: ssh: Could not resolve hostname master: Name or service not known
slaver01: ssh: Could not resolve hostname slaver01: Name or service not known

求助大神,到底是不是java和ssh的问题啊?我分别单独检查是没问题的!

附上软件版本:

spark 1.16.1
hadoop2.6.0

java-1.7.0-openjdk

分布式计算 Java 网络安全 Spark
分享到
取消 提交回答
全部回答(1)
  • 爱吃鱼的程序员
    2020-06-07 16:55:15
                        <pre><code>Could not resolve hostname master: Name or service not known</code></pre> 
    

    这里提示的很清楚了,你的hosts文件有没有修改? 

                        <pre><code>127.0.0.1       localhost
    

    192.168.2.154 master 192.168.2.55 slave01

    /etc/hosts检查是修改了

                        <p>你住主机名应该修改为与host中配置的相同</p>
    
                    
    
                        <p>检查过这个list ,配置相同的额</p>
    
                    
    
                        <p>hostname必须是master</p>
    

    hosts文件必须能找到master

    集群中其他任意节点必须知道master

    0 0
大数据
使用钉钉扫一扫加入圈子
+ 订阅

大数据计算实践乐园,近距离学习前沿技术

推荐文章
相似问题
推荐课程