Hadoop各服务组件如何配置在指定服务器运行

HDFS指定服务器运行

修改$hadoop/etc/hadoop/core-site.xml

指定namenode配置服务器

指定datanode配置服务器

修改slaves文件

image.png

secondarynamenode配置服务器

SecondaryNameNode：是由哪个文件中的哪个配置属性指定的呢？
hdfs-site.xml文件中；

        <property>
            <name>dfs.namenode.secondary.http-address</name>
            <value>hadoop-senior.ibeifeng.com:50090</value>
        </property>

yarn指定服务器运行

停止dfs服务

报错原因是没有配置hadoop-env.sh中的环境变量。

停止yarn服务

停止mapreduces的jobhistory

执行命令

sbin/mr-jobhistory-daemon.sh stop historyserver

启动所有服务

由于我们是伪分布式，所有的服务阶段在同一台服务器上。所以可以使用start-all.sh命令

启动历史MapReduce服务