hadoop系列——linux hadoop安装-阿里云开发者社区

hadoop系列——linux hadoop安装

2023-12-29 77

版权

本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

简介： hadoop系列——linux hadoop安装

一、安装模式

1.单机版本

2.伪分布式

3.完全分布式

二、安装过程

1.java jdk 安装

2.hadoop安装

(1)单机版 standalone

步骤一：下载 Apache Hadoop

步骤二：配置使用java

/Users/xiaoqiu/alibaba/soft/bigData/hadoop-2.9.2/etc/hadoop/hadoop-env.sh

步骤三：修改hdfs的配置文件

/Users/xiaoqiu/alibaba/soft/bigData/hadoop-2.9.2/etc/hadoop/core-site.xml
<configuration>
<!-- 指定HDFS老大（namenode）的通信地址 -->
    <property>
        <name>fs.defaultFS</name>
        <value>hdfs://localhost:9000</value>
    </property>
    <!-- 指定hadoop运行时产生文件的存储路径(本地路径即可) -->
    <property>
        <name>hadoop.tmp.dir</name>
        <value>/Users/xiaoqiu/alibaba/soft/bigData/tmp</value>
    </property>
</configuration>

步骤四：设置

/Users/xiaoqiu/alibaba/soft/bigData/hadoop-2.9.2/etc/hadoop/hdfs-site.xml
<configuration>
     <!--设置hdfs副本数量-->
     <property>
     <name>dfs.replication</name>
     <value>2</value>
     </property>
</configuration>