电子信息专业研一菜鸟一枚,在大数据老师的推荐下,注册阿里云用以完成大数据相关的作业,了解到阿里云的开发者成长计划有对学生的优惠,便申请了一台阿里云ECS服务器,顺便发现了一个新的宝藏,阿里云还有非常丰富的技术课程,甚至还有达摩院的人工智能课程,讲得非常细致并且全都免费开放。
使用阿里云服务器不仅可以直接搭建好ubuntu,而且已内置snap工具,网速很快,很多包还可以直接从阿里云镜像获得。刚开始经验不足,为了搭建大数据平台方便,打开了所有端口,结果使用过程中出现了卡死的情况,我马上登陆了管理后台准备重启服务器,看到了后台有好几条阿里云的告警,发现服务器中了bash反弹病毒,服务器被黑了,我立即关闭了所有端口并重启服务器,吃过亏后,后面都是根据需要再打开对应端口。
根据老师的要求,我在服务器上搭建了单机hadoop,安装了jupyterlab,实现了简单的大数据平台,后续安装了docker,起了spark服务。还学习了阿里云上的一些大数据课程,用服务器完成了老师布置的一些作业,在hbase数据库中完成增删查改以及使用spark实现分词并计数倒排。由于使用服务器,随时可以连上,完成作业非常方便。
感谢阿里云为学生提供的优惠,帮助更多学生可以使用服务器。我之前折腾过不少虚拟机,但都是在自己的小笔记本上,这次刚用服务器就遇到黑客,也算是一次难得的经验了,不过对我来说最大的收获还是阿里云提供的课程,真的心动了,准备开肝。