hadoop shell

简介:

1、查看帮助

hadoop fs -help <cmd>

2、上传

hadoop fs -put <linux上文件> <hdfs上的路径>

    如:hadoop fs -put test.log /

3、查看文件内容

hadoop fs -cat <hdfs上的路径>

   如:hadoop fs -cat /test.log

4、查看文件列表

hadoop fs -ls /

5、下载文件

hadoop fs -get <hdfs上的路径> <linux的路径,可以忽略,即为当前路径和原文件名>


6、创建目录:hadoop fs -mkdir 

如hadoop fs -mkdir /myDir


7、删除文件:hadoop fs -rm -r


8、执行jar:如执行hadoop自带的wordcount程序,


hadoop jar hadoop-mapreduce-examples-2.4.1.jar wordcount /wordcount/in /wordcount/out


执行结果如下图:

wKiom1eq-QSy-eoLAAA1eU3vHHM273.png



















本文转自lzf0530377451CTO博客,原文链接:http://blog.51cto.com/8757576/1836585 ,如需转载请自行联系原作者





相关文章
|
4月前
|
Java Shell 分布式数据库
【大数据技术Hadoop+Spark】HBase数据模型、Shell操作、Java API示例程序讲解(附源码 超详细)
【大数据技术Hadoop+Spark】HBase数据模型、Shell操作、Java API示例程序讲解(附源码 超详细)
131 0
|
4月前
|
分布式计算 Java 大数据
【大数据技术Hadoop+Spark】HDFS Shell常用命令及HDFS Java API详解及实战(超详细 附源码)
【大数据技术Hadoop+Spark】HDFS Shell常用命令及HDFS Java API详解及实战(超详细 附源码)
550 0
|
3月前
|
分布式计算 Hadoop Shell
分布式系统详解--框架(Hadoop-基本shell命令)
分布式系统详解--框架(Hadoop-基本shell命令)
31 0
|
4月前
|
分布式计算 Hadoop Shell
Hadoop【基础知识 04】【HDFS常用shell命令】(hadoop fs + hadoop dfs + hdfs dfs 使用举例)
【4月更文挑战第4天】Hadoop【基础知识 04】【HDFS常用shell命令】(hadoop fs + hadoop dfs + hdfs dfs 使用举例)
77 5
|
4月前
|
分布式计算 资源调度 Hadoop
Hadoop【环境搭建 03】【hadoop-3.1.3 集群版】(附:集群启动&停止Shell脚本)
【4月更文挑战第1天】Hadoop【环境搭建 03】【hadoop-3.1.3 集群版】(附:集群启动&停止Shell脚本)
88 2
|
4月前
|
分布式计算 资源调度 Hadoop
Hadoop【部署 02】hadoop-3.1.3 单机版YARN(配置、启动停止shell脚本修改及服务验证)
Hadoop【部署 02】hadoop-3.1.3 单机版YARN(配置、启动停止shell脚本修改及服务验证)
95 0
|
分布式计算 Hadoop Shell
Hadoop的Shell操作
Hadoop的Shell操作
119 0
|
存储 机器学习/深度学习 分布式计算
Hadoop基础学习---3、HDFS概述、HDFS的Shell操作、HDFS的API操作
Hadoop基础学习---3、HDFS概述、HDFS的Shell操作、HDFS的API操作
|
存储 分布式计算 Hadoop
Shell遍历hadoop目录的批量操作
Shell遍历hadoop目录的批量操作
102 0
|
分布式计算 Hadoop Shell
开启hadoop后对文件执行shell操作
开启hadoop后对文件执行shell操作