Win7下安装Hadoop-阿里云开发者社区

开发者社区> 开发与运维> 正文
登录阅读全文

Win7下安装Hadoop

简介: 1、本人电脑是Win7 64位系统的: 2、JDK 版本: 3、Cygwin 版本: 官网自行下载 4、Hadoop 版本: 官网自行下载,下载稳定版的吧 下面就开始安装啦~~~~ 一、 安装JDK,安装时注意,最好不要安装到带有空格的路径名下,例如:Programe Files,否则在配置Hadoop的配置文件时会找不到JDK。我安装的路径为C:\Java\j

1、本人电脑是Win7 64位系统的:

2、JDK 版本:

3、Cygwin 版本:
官网自行下载
4、Hadoop 版本:
官网自行下载,下载稳定版的吧
下面就开始安装啦~~~~
一、 安装JDK,安装时注意,最好不要安装到带有空格的路径名下,例如:Programe Files,否则在配置Hadoop的配置文件时会找不到JDK。我安装的路径为C:\Java\jdk1.7.0_21,安装完配置环境变量:
1. 安装完成后开始配置环境变量,右击我的电脑,点击属性
2. 在出现的对话框中选择高级系统设置,在出现的对话框中选择环境变量
3. 新建名为”JAVA_HOME“的变量名,变量值为之前安装jdk的目录,例如本人的为” C:\Java\jdk1.7.0_21 “
4. 在已有的系统变量”path“的变量值加上”%JAVA_HOME%\bin;(注意,每个变量值是以”;“隔开,变量值开头的分号就起这个作用)自此配置完成。

二、 安装Cygwin,下载地址:http://www.cygwin.com/,根据操作系统的需要下载32位或64的安装文件。
1 . 双击下载好的安装文件,点击下一步,选择install from internet
2 选择安装路径,下一步,点下一步,选择合适的安装源,点击下一步
3 在Select Packages界面里,Category展开net,选择如下openssh和openssl两项
4 如果要在Eclipe上编译Hadoop,需要安装Category为Base下的sed
5  如果想在Cygwin上直接修改hadoop的配置文件,可以安装Editors下的vim

6 .点击“下一步”,等待安装完成。
三、 配置环境变量,在“我的电脑”上点击右键,选择菜单中的“属性”,点击属性对话框上的高级页签,点击”环境变量”按钮,在系统变量列表里双击“Path”变量,在变量值后输入安装的Cygwin的bin目录,例如:D:\cygwin64\bin
四、 安装sshd服务,双击桌面上的Cygwin图标,启动Cygwin,执行ssh-host-config -y命令
五、 执行后,会提示输入密码,否则会退出该配置,此时输入密码和确认密码,回车。最后出现Host configuration finished.Have fun!表示安装成功,输入net start sshd,启动服务。或者在系统的服务里找到并启动Cygwin sshd服务。可能会遇到无法安装和启动sshd服务的问题,可参考此连接http://www.cnblogs.com/kinglau/p/3261886.html
六、 配置SSH免密码登录,执行ssh-keygen命令生成密钥文件,输入:ssh-keygen -t dsa -P ” -f ~/.ssh/id_dsa,注意-t -P -f参数区分大小写,
七、 执行此命令后,在你的Cygwin\home\用户名 路径下面会生成.ssh文件夹,可以通过命令ls -a /home/用户名 查看,ssh -version命令查看版本,执行完ssh-keygen命令后,再执行下面命令,就可以生成authorized_keys文件了。
八、 cd ~/.ssh/
九、 cp id_dsa.pub authorized_keys
十、 然后执行exit命令,退出Cygwin窗口。
十一、 再次在桌面上双击Cygwin图标,打开Cygwin窗口,执行ssh localhost命令,第一次执行该命令会有提示,输入yes后,回车即可。如下图所示
十二、 安装Hadoop,hadoop官网下载http://hadoop.apache.org/releases.html
十三、 把hadoop压缩包解压到/home/用户名 目录下,文件夹名称更改为hadoop
十四、 配置hadoop-env.sh,记事本打开改文件,设置JAVA_HOME的值为你的JDK安装路径,例如:JAVA_HOME=/cygdrive/C/Java/jdk1.7.0_21(注意/的方向)
十五、 修改配置参考:http://pengbin6755198.blog.163.com/blog/static/2325493920142107215867/
十六、 注意:
fs.default.name
hdfs://localhost:9000
最好写成主机名,不要写localhost
十七、 如果报错:

参考http://bbs.csdn.net/topics/390752976

弄了一上午,算是配置好了!!!!!!!!!!!!!!!
以前没接触过,报错了就去网上查,现在总结一下,给你们参考吧!

笔者是新手,推荐Linux下安装的步骤,一同学写的,很经典~
http://blog.csdn.net/zhaodedong/article/details/46386173

版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。

分享: