hadoop的单台部署

简介: hadoop的单台部署

基础环境

1.一台电脑,电脑上有安装VMware Workstation

2.有centos7的镜像(任何版本都行)

3.远程连接软件

具体操作

1.创建用户

useradd hadoop-ch
passwd hadoop-ch

两次输入密码,回车。

1-2.设置sudo用户

vi /etc/sudoers
加入如下内容(最后):
hadoop-ch ALL=(ALL) ALL

保存,退出(wq!)。

1-3.使用新创建的用户登陆linux

ssh hadoop-ch@ip地址

2.安装Apache-hadoop

2-1.创建下载目录

mkdir -p /home/hadoop-ch/downloads
cd /home/hadoop-ch/downloads

2-2.自己上传或下载hadoop的压缩包

2-3.解压缩包

tar -zxvf /home/hadoop-ch/downloads/hadoop-3.3.2.tar.gz -C /usr/local/
cd /usr/local
mv hadoop-3.3.2/  hadoop

3.安装jdk

3-1自己上传JDK的压缩包

我这里是上传的jdk-8u202-linux-x64.tar.gz

3-2.解压缩包

tar -zxvf /home/hadoop-ch/downloads/jdk-8u202-linux-x64.tar.gz -C /usr/local
mv /usr/local/jdk1.8.0_202/   /usr/local/jdk

3-3.编写配置环境变量

vi ~/.bashrc 
加入如下内容(最后):
export JAVA_HOME=/usr/local/jdk
export PATH=$PATH:$JAVA_HOME/bin 

3-4.更改运用到当前运行的系统

source ~/.bashrc

3-5.验证jdk是否安装成功

java -version

4.配置hadoop环境变量

vi /etc/profile
添加如下内容(最后):
export HADOOP_HOME=/usr/local/hadoop/
export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin
保存,退出
source /etc/profile

4-1.验证hadoop是否安装成功

hadoop version

感谢大家,点赞,收藏,关注,评论!

目录
相关文章
|
6月前
|
分布式计算 资源调度 Hadoop
Hadoop节点资源扩展环境部署
【4月更文挑战第16天】扩展Hadoop集群涉及多个步骤:准备新节点,配置静态IP,安装并配置Hadoop,将新节点添加到集群,验证测试,及优化调整。确保符合硬件需求,更新集群节点列表,执行`hdfs dfsadmin -refreshNodes`命令,检查新节点状态,并依据测试结果优化性能。注意不同环境可能需要调整具体步骤,建议参照官方文档并在测试环境中预演。
57 4
|
29天前
|
分布式计算 资源调度 Hadoop
大数据-80 Spark 简要概述 系统架构 部署模式 与Hadoop MapReduce对比
大数据-80 Spark 简要概述 系统架构 部署模式 与Hadoop MapReduce对比
61 2
|
3月前
|
分布式计算 资源调度 Hadoop
Hadoop入门基础(二):Hadoop集群安装与部署详解(超详细教程)(二)
Hadoop入门基础(二):Hadoop集群安装与部署详解(超详细教程)(二)
|
3月前
|
分布式计算 Ubuntu Hadoop
Hadoop入门基础(二):Hadoop集群安装与部署详解(超详细教程)(一)
Hadoop入门基础(二):Hadoop集群安装与部署详解(超详细教程)(一)
|
3月前
|
SQL 分布式计算 Hadoop
centos7通过CDH部署Hadoop
centos7通过CDH部署Hadoop
|
3月前
|
分布式计算 Java Linux
centos7通过Ambari2.74部署Hadoop
centos7通过Ambari2.74部署Hadoop
|
3月前
|
存储 分布式计算 监控
Hadoop在云计算环境下的部署策略
【8月更文第28天】Hadoop是一个开源软件框架,用于分布式存储和处理大规模数据集。随着云计算技术的发展,越来越多的企业开始利用云平台的优势来部署Hadoop集群,以实现更高的可扩展性、可用性和成本效益。本文将探讨如何在公有云、私有云及混合云环境下部署和管理Hadoop集群,并提供具体的部署策略和代码示例。
110 0
|
5月前
|
分布式计算 Hadoop 网络安全
|
5月前
|
存储 分布式计算 Hadoop
|
5月前
|
分布式计算 Hadoop Java

相关实验场景

更多