一、安装模式
1.单机版本
2.伪分布式
3.完全分布式
二、安装过程
1.java jdk 安装
2.hadoop安装
(1)单机版 standalone
步骤一:下载 Apache Hadoop
步骤二:配置使用java
/Users/xiaoqiu/alibaba/soft/bigData/hadoop-2.9.2/etc/hadoop/hadoop-env.sh
步骤三:修改hdfs的配置文件
/Users/xiaoqiu/alibaba/soft/bigData/hadoop-2.9.2/etc/hadoop/core-site.xml <configuration> <!-- 指定HDFS老大(namenode)的通信地址 --> <property> <name>fs.defaultFS</name> <value>hdfs://localhost:9000</value> </property> <!-- 指定hadoop运行时产生文件的存储路径(本地路径即可) --> <property> <name>hadoop.tmp.dir</name> <value>/Users/xiaoqiu/alibaba/soft/bigData/tmp</value> </property> </configuration>
步骤四:设置
/Users/xiaoqiu/alibaba/soft/bigData/hadoop-2.9.2/etc/hadoop/hdfs-site.xml <configuration> <!--设置hdfs副本数量--> <property> <name>dfs.replication</name> <value>2</value> </property> </configuration>
步骤五:ssh localhost配置
步骤五:启动与停止
第一次启动得格式化
/Users/xiaoqiu/alibaba/soft/bigData/hadoop-2.9.2/bin/hdfs namenode -format
/Users/xiaoqiu/alibaba/soft/bigData/hadoop-2.9.2/sbin/start-dfs.s
jps
成功:
hadoop 命令安装
解决方法
1. cd /etc/profile
2. 把这三条加到proflie文件的最后
export JAVA_HOME=XXXX(在安装了jdk的前提下,echo $JAVA_HOME可以查看得到)
export HADOOP_HOME=XXX(hadoop的安装路径)
export PATH=.:HADOOPHOME/bin:HADOOP_HOME/bin:JAVA_HOME/bin:$PATH
完成后保存文件, 更新环境变量
source /etc/profile
参考:
SSH localhost免密码后依然需要输入密码问题的解决_Linux教程