真不知道该怎么开头,一转眼就到大四找实习的时候,现在也没有什么课程和作业了,每天就是在寝室里找合适的单位,然后写简历,投简历,等面试。时间还是比较空余,于是就想着做一个自己的网站,阿里云服务器就是我建站的首选。我第一次接触阿里云服务器是大三下学期,也是在一次选修课上知道了现在很多厂商选择在云服务器上建网站,下了课我就搜索云服务器相关知识。其实我很早就对云计算有所耳闻,只是经过那次深入了解才知道云服务器的运用竟然会如此广泛,从而也萌生了租一个自己的云服务器的想法。
我们学校没有相关的课程,也没有教学账号,我只好自己去找相关的教程。最后在服务器上配置了一些环境,跑了一些程序,然后慢慢的因为学业和一些琐事而把服务器荒废了,现在想想还是觉得有点浪费,如果能当时能坚持维护好自己的服务器,现在我应该有一个内容充实的博客了吧。这学期由于我的时间有开始充裕起来,我决定重启服务器,把以前搭建的环境都扔掉,从零开始,尽量把它做好。正好我又申请到了飞天加速计划,现在就有了2台云服务器,于是就想先试试分布式存储。
下面是我在云服务器上安装Hadoop环境的大概过程,配置Hadoop集群安装的过程暂时没有保留,等有时间再更新的过程:
1、建立一个新用户Hadoop,并赋予管理员权限
2、更新apt
3、安装ssh,设置ssh无密码登录
登录ssh
每次打开都需要输入密码,有点麻烦,所以设置免密码登录
(输入ssh-keygen -t rsa 然后一直按Enter)
然后执行以下语句
cd .ssh
cat id_rsa.pub >> authorized_keys
4、下载Java安装包
tar -zxvf openjdk-8u41-b04-linux-x64-14_jan_2020.tar.gz
5、解压Java安装包
6、移动并重命名JDK
查看解压后jvm
修改文件名称为Java8
7、配置Java环境
进入配置文件
cd ~
vim ~/.bashrc
在文件头输入以下配置信息
export JAVA_HOME=/usr/lib/jvm/java8
export JRE_HOME=${JAVA_HOME}/jre
export CLASSPATH=.:${JAVA_HOME}/lib:${JRE_HOME}/lib
export PATH=${JAVA_HOME}/bin:$PATH
最后记得 source ~/.bashrc
7、查看是否配置成功
8、下载Hadoop安装包
镜像文件可以上https://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/ 查看
解压
配置环境
最后看一下版本
安装教程暂时完了,接下来就是集群安装配置了
这里我要对所有和我一样的初学者说一句,一定要学会使用Linux的命令行,尽量不要使用图形化界面,这会严重影响服务器运行,虽然放弃了图形化界面会有不适应,但是很多企业服务器都是不使用图形界面的,之前我看一个介绍Dell的一款服务器的视频,那款最近推出的服务器居然还在用VGA接口,据说因为他们是集成管理,也用不上图形界面,安装HDMI接口也是浪费。
其实我也是一个初学者,对云计算还不算很了解,但我的一位前辈和我说学习这些就是要持之以恒,因为技术是在不断发展的,一个在IT行业里耕耘10年的开发者在面对新技术的时候其实是和我们站在一条起跑线上的,所以我们也不要觉得现在才开始学习太晚了,最好的学习时间永远是今天。我对云服务也是很看好,从技术角度来说,现在的网络条件是十分良好,虚拟技术也已经十分成熟;从市场角度来看,现在各大厂商都在争夺云服务器这块宝地,说明这是一个很有前景的行业。我们要做的就是不断精进武艺,尽量跟上时代的发展。