hadoop安装常见问题

简介: hadoop安装常见问题

SSH服务器拒绝了密码。请再试一次



59d6c74b21f84f6b91acfa2703504fc4_tplv-k3u1fbpfcp-zoom-in-crop-mark_4536_0_0_0.jpg


是你命令窗口的$ 后面是你的用户名,不是登陆时候的。


c87e74f51e944dbba258fc30fb8097aa_tplv-k3u1fbpfcp-zoom-in-crop-mark_4536_0_0_0.jpg

ubuntu修改登陆用户名



3e85f9434823464badc5ab5b9960a281_tplv-k3u1fbpfcp-zoom-in-crop-mark_4536_0_0_0.jpg

dc102daaff344491b1fbf662ceb2bf13_tplv-k3u1fbpfcp-zoom-in-crop-mark_4536_0_0_0.jpg

这样ftp成功链接ubuntu



e7e3ba57950f4fc5bfb09b0ed26af3d5_tplv-k3u1fbpfcp-zoom-in-crop-mark_4536_0_0_0.jpg

现在的ubuntu支持直接拖拽文件传输,不用ftp的


这是单词统计程序结果


5d17d6c4fa184e4fb0712b68d111236f_tplv-k3u1fbpfcp-zoom-in-crop-mark_4536_0_0_0.jpg

yarn是什么



一种包管理工具


经过前面几篇文章,npm、cnpm装的都差不多了,这篇文章中,简单介绍下yarn的安装与使用。


1.安装


npm install -g yarn
复制代码

查看版本


yarn --version
复制代码

2.yarn 常用命令


安装yarn : npm install -g yarn

安装成功后,查看版本号: yarn –version

创建文件夹 yarn : md yarn

进入yarn文件夹: cd yarn


linux配置java环境变量



  1. 用文本编辑器新建一个Test.java文件,在其中输入以下代码并保存:

public class test {
public static void main(String args[]) {
System.out.println("A new jdk test !");
}
}


  1. 编译:在shell终端执行命令 javac Test.java\
  2. 运行:在shell终端执行命令 java Test
    当shell下出现“A new jdk test !”字样则jdk运行正常。


一. 解压安装jdk


在shell终端下进入jdk-6u14-linux-i586.bin文件所在目录,

执行命令 ./jdk-6u14-linux-i586.bin 这时会出现一段协议,连继敲回车,当询问是否同意的时候,输入yes,回车。之后会在当前目录下生成一个jdk1.6.0_14目录,你可以将它复制到 任何一个目录下。


二. 需要配置的环境变量\


  1. PATH环境变量。作用是指定命令搜索路径,在shell下面执行命令时,它会到PATH变量所指定的路径中查找看是否能找到相应的命令程序。我们需要把 jdk安装目录下的bin目录增加到现有的PATH变量中,bin目录中包含经常要用到的可执行文件如javac/java/javadoc等待,设置好 PATH变量后,就可以在任何目录下执行javac/java等工具了。\


  1. CLASSPATH环境变量。作用是指定类搜索路径,要使用已经编写好的类,前提当然是能够找到它们了,JVM就是通过CLASSPTH来寻找类的。我们 需要把jdk安装目录下的lib子目录中的dt.jar和tools.jar设置到CLASSPATH中,当然,当前目录“.”也必须加入到该变量中。\


  1. JAVA_HOME环境变量。它指向jdk的安装目录,Eclipse/NetBeans/Tomcat等软件就是通过搜索JAVA_HOME变量来找到并使用安装好的jdk。

    三. 三种配置环境变量的方法

1. 修改/etc/profile文件

如果你的计算机仅仅作为开发使用时推荐使用这种方法,因为所有用户的shell都有权使用这些环境变量,可能会给系统带来安全性问题。


·用文本编辑器打开/etc/profile
·在profile文件末尾加入:
export JAVA_HOME=/usr/share/jdk1.6.0_14
export PATH=JAVAHOME/bin:JAVA_HOME/bin:JAVAHOME/bin:PATH
export CLASSPATH=.:JAVAHOME/lib/dt.jar:JAVA_HOME/lib/dt.jar:JAVAHOME/lib/dt.jar:JAVA_HOME/lib/tools.jar


a3843dd260594f1395f8a74bc7f6a375_tplv-k3u1fbpfcp-zoom-in-crop-mark_4536_0_0_0.png

hadoop安装包下载



Apache Downloads


3a08e3d7c05a401dbb49fb968f1a7abb_tplv-k3u1fbpfcp-zoom-in-crop-mark_4536_0_0_0.png


linux不能编辑sshd_cofig



sshd_cofig 是只读模式

在vim前面加上sudo,之后输入密码,就能编辑并可以i保存。


SSH的简单理解和运用



SSH是一种网络协议,用于计算机之间的加密登录。如果一个用户从本地计算机,使用SSH协议登录另一台远程计算机, 我们就可以认为,这种登录是安全的,即使被中途截获,密码也不会泄露。


最早的时候,互联网通信都是明文通信,一旦被截获,内容就暴露无疑。1995年,芬兰学者Tatu Ylonen设计了SSH协议,将登录信息全部加密,成为互联网安全的一个基本解决方案,迅速在全世界获得推广,目前已经成为Linux系统的标准配置。


需要指出的是,SSH只是一种协议,存在多种实现,既有商业实现,也有开源实现。本文针对的实现 OpenSSH,它是自由软件,应用非常广泛。


e4d03cda9d274b4ea28e2d890faab499_tplv-k3u1fbpfcp-zoom-in-crop-mark_4536_0_0_0.png


更新本地已安装的所有软件包:sudo apt-get upgrade


安装:sudo apt-get install openssh-server

查看ssh是否启动:sudo service sshd status


(1)开启ssh服务:sudo /etc/init.d/ssh start

(2)关闭ssh服务:sudo service ssh stop

(3)重启ssh服务:sudo /etc/init.d/ssh reatart


目录
相关文章
|
5月前
|
消息中间件 分布式计算 大数据
【大数据技术Hadoop+Spark】Flume、Kafka的简介及安装(图文解释 超详细)
【大数据技术Hadoop+Spark】Flume、Kafka的简介及安装(图文解释 超详细)
77 0
|
1天前
|
分布式计算 资源调度 Hadoop
安装hadoop学习笔记
安装hadoop学习笔记
13 0
安装hadoop学习笔记
|
2天前
|
分布式计算 网络协议 Hadoop
Hadoop常见问题
【5月更文挑战第4天】Hadoop常见问题
15 3
|
16天前
|
分布式计算 Hadoop Linux
找到Hadoop的安装目录
【4月更文挑战第19天】具体的安装目录可能因您的安装方式和环境而有所不同。如果您在安装Hadoop时遵循了特定的教程或文档,建议参考该教程或文档中的安装目录信息。
12 3
|
17天前
|
分布式计算 Hadoop 大数据
[大数据] mac 史上最简单 hadoop 安装过程
[大数据] mac 史上最简单 hadoop 安装过程
|
22天前
|
资源调度
Hadoop3的安装
Hadoop3的安装
21 0
|
1月前
|
分布式计算 Hadoop Java
centos 部署Hadoop-3.0-高性能集群(一)安装
centos 部署Hadoop-3.0-高性能集群(一)安装
26 0
|
5月前
|
消息中间件 存储 分布式计算
Hadoop学习笔记(HDP)-Part.19 安装Kafka
01 关于HDP 02 核心组件原理 03 资源规划 04 基础环境配置 05 Yum源配置 06 安装OracleJDK 07 安装MySQL 08 部署Ambari集群 09 安装OpenLDAP 10 创建集群 11 安装Kerberos 12 安装HDFS 13 安装Ranger 14 安装YARN+MR 15 安装HIVE 16 安装HBase 17 安装Spark2 18 安装Flink 19 安装Kafka 20 安装Flume
83 0
Hadoop学习笔记(HDP)-Part.19 安装Kafka
|
4月前
|
分布式计算 资源调度 Hadoop
在Linux系统上安装Hadoop的详细步骤
【1月更文挑战第4天】在Linux系统上安装Hadoop的详细步骤
454 0
|
5月前
|
存储 分布式计算 Hadoop
hadoop 安装系列教程二——伪分布式
hadoop 安装系列教程二——伪分布式
48 0