1.Hadoop运行环境搭建(开发重点)
1.1模板虚拟机环境准备
1.1.1安装模板虚拟机,IP地址192.168.10.100、主机名称hadoop100、内存4G、硬盘50G
1.1.2hadoop100虚拟机配置要求如下(本文Linux系统全部以CentOS-7-x86_64-DVD-2009为例)
1.1.2.1使用yum安装需要虚拟机可以正常上网,yum安装前可以先测试下虚拟机联网情况
- [root@hadoop100 ~]# ping www.baidu.com
1.1.2.2安装epel-release
注:Extra Packages for Enterprise Linux是为“红帽系”的操作系统提供额外的软件包,适用于RHEL、CentOS和Scientific Linux。相当于是一个软件仓库,大多数rpm包在官方repository中是找不到的
- [root@hadoop100 ~]# yum install -y epel-release
当出现这种情况的时候,直接杀死3030这个进程好即可
- [root@hadoop100 ~]# kill -9 3030
1.1.2.3注意:如果Linux安装的是最小系统版,还需要安装如下工具;如果安装的是Linux桌面标准版,不需要执行如下操作
net-tool:工具包集合,包含ifconfig等命令
- [root@hadoop100 ~]# yum install -y net-tools
vim:编辑器
- [root@hadoop100 ~]# yum install -y vim
1.1.3关闭防火墙,关闭防火墙开机自启
- [root@hadoop100 ~]# systemctl stop firewalld
-[root@hadoop100 ~]# systemctl disable firewalld.service
注意:在企业开发时,通常单个服务器的防火墙时关闭的。公司整体对外会设置非常安全的防火墙
1.1.4创建summer用户,并修改summer用户的密码
- [root@hadoop100 ~]# useradd summer
- [root@hadoop100 ~]# passwd summer
为什么会出现无效的密码,密码少于8位,是因为我输出的密码太简单了,才出现那种情况,直接再输入一边即可
1.1.5配置summer用户具有root权限,方便后期加sudo执行root权限的命令
- [root@hadoop100 ~]# vim /etc/sudoers
修改/etc/sudoers文件,在%wheel这行下面添加一行,如下所示:
注意:summer这一行不要直接放到root行下面,因为所有用户都属于wheel组,你先配置了summer具有免密功能,但是程序执行到%wheel行时,该功能又被覆盖回需要密码。所以summer要放到%wheel这行下面。
1.1.6在/opt目录下创建文件夹,并修改所属主和所属组
1.1.6.1删除rh ,用rm -rf rh/的时候权限不够,需要前面加上sudo
- [summer@hadoop100 opt]$ sudo rm -rf rh/
1.1.6.2在/opt目录下创建module、software文件夹
需要前面加上sudo才可以使用
- [summer@hadoop100 opt]$ sudo mkdir module
- [summer@hadoop100 opt]$ sudo mkdir software
1.1.6.3修改module、software文件夹的所有者和所属组均为summer用户
- [summer@hadoop100 opt]$ sudo chown summer:summer module
- [summer@hadoop100 opt]$ sudo chown summer:summer software
1.1.6.4查看module、software文件夹的所有者和所属组
1.1.7卸载虚拟机自带的JDK
注意:如果你的虚拟机是最小化安装不需要执行这一步
查看有多少包
- [root@hadoop100 opt]# rpm -qa | grep -i java
- [root@hadoop100 opt]# rpm -qa | grep -i java | xargs -n1 rpm -e --nodeps
这样就可以将所有的关于java的包全删除了
语句 | 含义 |
---|---|
rpm -qa | 查询所安装的所有rpm软件包 |
grep -i | 忽略大小写 |
xargs -n1 | 表示每次只传递一个参数 |
rpm -e –nodeps | 强制卸载软件 |
1.1.8重启虚拟机
- [root@hadoop100 opt]# reboot