大数据在单机进行Hadoop的伪分布式安装(安装Linux~Ubuntu 的虚拟机~VirtualBox 和安装 Hadoop)

本文涉及的产品
云原生大数据计算服务 MaxCompute,5000CU*H 100GB 3个月
云原生大数据计算服务MaxCompute,500CU*H 100GB 3个月
简介: 大数据在单机进行Hadoop的伪分布式安装(安装Linux~Ubuntu 的虚拟机~VirtualBox 和安装 Hadoop)

大数据在单机进行Hadoop的伪分布式安装(安装Linux~Ubuntu  的虚拟机~VirtualBox 和安装 Hadoop)

 

1,思路:第一步:先在windows 安装虚拟机 VirtualBox

过程:官网:(1)下载VirtualBox,网址:https://www.virtualbox.org/wiki/Downloads


28.png

(2)安装VirtualBox(就安装最新版的,官网还支持的)

安装过程,很简单,就是安装路径想改就改一下,其他的next的next,yes的yes,就成功了


29.png


❀ 安装后,建议设置一下全局,具体步骤:管理-》全局设定-》常规,修改一下 默认虚拟的电脑位置


30.png


2,思路:第二步:下载Ubuntu18版本,等一下要使用虚拟机VirtualBox来安装它

(新版本应该也行吧,不过课本用了最新的18,交作业的话,听课本安排也行~)

过程:官网下载 Ubuntu18版本网址:https://www.virtualbox.org/wiki/Downloads(太慢了~考虑用镜像)

~~~~~官网下载太慢:清华镜像,网址:清华大学开源软件镜像站 | Tsinghua Open Source Mirror


31.png

32.png


3,思路:第三步:使用虚拟机VirtualBox来安装Ubuntu

(1)具体步骤:新建-》名称:Ubuntu,文件夹:默认虚拟电脑位置

(一开始进行全局设定时设定啦,如果一开始没设定,现在选一个文件作为虚拟电脑的位置即可


33.png


(2)避免卡顿现象,建议给4G或以上的内存(4G 是 4096MB)


34.png


(3)然后next(next:现在创建虚拟硬盘-》VDI-》动态分配)直到  虚拟硬盘的大小(建议给大点 20G)



35.png

  ~~~~~~~~~~~至此可以看到如下结果~~~~~~~~~~~~~~~~~~~~~~~~


36.png


(4)此时“没有盘片”,且“Ubuntu 是关闭的”,则需要先导入盘片,然后再开启Ubuntu。

  ■ 解决“没有盘片”的具体步骤:选中 Ubuntu(关闭状态)-》设置-》存储-》没有盘片-》.....(选择 光盘影像文件:ubuntu-18.04.6-desktop-amd64.iso)


37.png


(5)  ■ 启动 Ubuntu:点击 启动 , 然后就按照提示来即可~

-选择 中文(简体)-》安装 Ubuntu -》 汉语, 汉语 -》 正常安安装 Ubuntu 时下载更新

-》选择安装类型为:清除整个磁盘并安装Ubuntu,然后点击 现在安装

-》将改动写入磁盘吗? 点击 继续 -》时区,默认选择 shanghai -》设置计算机名、用户名、用户密码


38.png


(6)装结束后,重新启动(重启大概 15分钟左右吧)

 

(7)扩展安装包,建议一并安装上吧,因为有个bug:(主机、虚拟机可能会出现内存占用的干扰):

 ①  先到官网下载一下扩展安装包(记得版本要与VBox 一致):例如我的是:Oracle_VM_VirtualBox_Extension_Pack-6.1.26.vbox-extpack

      官网:https://www.virtualbox.org/wiki/Downloads

 ②安装扩展步骤:管理-》全局设定-》+ -》选择扩展安装包 -》 安装 ...


39.png


可选操作~(对于需要安装hadoop 建议操作搞一波理由:安装hapdoop时java的jdk需要从主机共享给虚拟机呀

virtualbox中ubuntu虚拟机安装增强功能

------安装增强工具的目的主要有两个:

  1. 实现虚拟机(Ubuntu)和主机(Windows)的文件共享
  2. 可以使用全屏模式~即启用 vbox 无缝模式,该过程需要安装增强功能~
  3. 实现主机与虚拟机双向的复制粘贴

Error mounting /dev/sr0 at /media/ VBox【虚拟机增强功能问题】:

解决:重新安装linux映像

命令:sudo apt-get install --reinstall linux-image-$(uname -r)

 

(1) 设置Ubuntu的菜单栏不隐藏  之 具体步骤:打开virtualbox -》设置 -》用户界面 -》......


40.png


 (2)虚拟机(Ubuntu)和主机(Windows)的文件共享 之 具体步骤:virtualbox -》设置 -》共享文件夹 -》.....


41.png


(3)全屏模式~即启用 vbox 无缝模式,~安装增强工具

具体步骤:启动 Ubuntu -》(Ubuntu界面的) 设备 -》安装增强功能

(可能遇到的bug:virtualbox安装增强功能时【未能加载虚拟光盘】)

~解决:(注意,配置光驱时需要先将虚拟机关机,配置完成后再开启。):vbox下 -》 设置 -》存储-》... (在VBox安装目录下找到VBoxGuestAdditions.iso


42.png


~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~

-》在桌面的VBox_GAs_6.**(6点几的版本)的盘符或在主文件中进入VBox_GAs_6.**(6点几的版本),点击其进入

-》点击运行软件,安装增强工具的依赖 -》命令如下:

(可能会遇到bug:就是进去后,直接被要求输入回车键,然后自动退出了,导致咱的增强工具依赖没机会安装上)~解决:通过终端来安装增强工具的依赖

sudo apt-get install gcc perl make

 

~~~~~~~~~~~~~~~~~~~~~~~通过终端来安装增强工具的依赖~~~~~~~~~~~~~~~~~~~~~~~~~~~~~

①先记住你的VBox_GAs_6.** 盘符所在的路径


43.png


②ctr+alt+t 进入终端:(依次输入以下命令:)

sudo su
cd /media/yushan/VBox_GAs_6.1.26      #cd /VBox_GAs的位置
sudo apt-get install gcc perl make


如果遇到有XX个软件包未被升级:
解决:(执行命令):sudo apt-get dist-upgrade

③ 重启 Ubuntu (或者退出去,再进来,就可以实现共享啦)

ps:共享的使用:在windows复制某个文件到 咱设置的这个共享文件里,便在主机和虚拟机都有这个文件。

 ④ 在 vbox 的 设置 --> 常规 --> 高级 里的 共享粘贴板 和 拖放 选择 双向,使得虚拟机和主机的交互更加简单

❀安装成功后ctr+c 即可进入 无缝模式

(vbox 安装 ubuntu 后,如果不能启用无缝模式,外观不能全屏,操作也很不方便~,通过安装增强功能实现无缝模式啦)


44.png


❀ 安装成功后:便可以实现文件的共享

共享的使用:例如在windows复制某个文件到 咱设置的这个共享文件里,便在主机和虚拟机都有这个文件。

 ❀ 安装成功后:便可以实现主机和虚拟机之间相互复制粘贴

目录
相关文章
|
2月前
|
Ubuntu Shell 网络安全
安装了ubuntu虚拟机后发现shell无法连接 ubuntu开启ssh连接
【8月更文挑战第23天】安装了ubuntu虚拟机后发现shell无法连接
116 6
|
7天前
|
Unix Linux 开发工具
centos的官网下载和vm16虚拟机安装centos8【保姆级教程图解】
本文详细介绍了如何在官网下载CentOS 8以及在VMware Workstation Pro 16虚拟机上安装CentOS 8的步骤,包括可能出现的问题和解决方案,如vcpu-0错误的处理方法。
centos的官网下载和vm16虚拟机安装centos8【保姆级教程图解】
|
2月前
|
测试技术 Linux 虚拟化
iOS自动化测试方案(五):保姆级VMware虚拟机安装MacOS
详细的VMware虚拟机安装macOS Big Sur的保姆级教程,包括下载VMware和macOS镜像、图解安装步骤和遇到问题时的解决方案,旨在帮助读者顺利搭建macOS虚拟机环境。
59 3
iOS自动化测试方案(五):保姆级VMware虚拟机安装MacOS
|
2月前
|
编解码 Linux 虚拟化
超详细VMware虚拟机安装Win10操作系统过程图解
这篇文章提供了一个详细的VMware虚拟机安装Windows 10操作系统的图解教程,包括了从创建虚拟机到安装操作系统的全过程,以及安装后的一些基本设置,如屏幕分辨率调整等。作者还提到了后续会分享关于磁盘分区的创建过程。
超详细VMware虚拟机安装Win10操作系统过程图解
|
2月前
|
分布式计算 资源调度 Hadoop
centos7二进制安装Hadoop3
centos7二进制安装Hadoop3
|
2月前
|
测试技术 开发工具 虚拟化
iOS自动化测试方案(一):MacOS虚拟机保姆级安装Xcode教程
这篇文章提供了一份保姆级的教程,指导如何在MacOS虚拟机上安装Xcode,包括环境准备、基础软件安装以及USB扩展插件的使用,以实现iOS自动化测试方案的第一步。
37 0
iOS自动化测试方案(一):MacOS虚拟机保姆级安装Xcode教程
|
2月前
|
Ubuntu
【ubuntu系统】在虚拟机内安装Ubuntu
【ubuntu系统】在虚拟机内安装Ubuntu
38 0
|
Ubuntu Oracle 关系型数据库
VirtualBox如何扩展虚拟机Ubuntu的硬盘容量?
一、问题描述 刚刚在VirtualBox中使用Ubuntu虚拟机中,出现了虚拟硬盘不够用的情况。 乖乖,查了一下磁盘空间,如下所示: df -H 原来是上午安装Ubuntu虚拟机的时候,选择了动态分配存储,想当然的以为硬盘不够用的时候,它会自动扩展,没想到上限是默认的8G。
3058 0
|
4月前
|
Unix Linux 虚拟化
虚拟机VMware知识积累
虚拟机VMware知识积累
|
21天前
|
存储 SQL 数据挖掘
虚拟化数据恢复—VMware虚拟机vmdk文件被误删除的数据恢复案例
虚拟化数据恢复环境: 某品牌服务器(部署VMware EXSI虚拟机)+同品牌存储(存放虚拟机文件)。 虚拟化故障: 意外断电导致服务器上某台虚拟机无法正常启动。查看虚拟机配置文件发现这台故障虚拟机除了磁盘文件以外其他配置文件全部丢失,xxx-flat.vmdk磁盘文件和xxx-000001-delta.vmdk快照文件还在。管理员联系VMware工程师寻求帮助。VMware工程师尝试新建一个虚拟机来解决故障,但发现ESXi存储空间不足。于是将故障虚拟机下的xxx-flat.vmdk磁盘文件删除,然后重建一个虚拟机并且分配固定大小的虚拟磁盘。
下一篇
无影云桌面