上传文件到hdfs注意事项

简介: 我在MapReduceInput下创建CFItemSet文件夹,下面有itemSet.txt。 我想上传到cf下,然后想着hdfs上会显示cf/itemSet.txt。 hdfs dfs -put itemSet.txt /cf   但是发现hdfs上只有cf文件,注意并不是文件夹,好奇怪,只能先删除(否则提示cf已存在)再重新上川。

我在MapReduceInput下创建CFItemSet文件夹,下面有itemSet.txt。

我想上传到cf下,然后想着hdfs上会显示cf/itemSet.txt。

hdfs  dfs -put itemSet.txt /cf

  但是发现hdfs上只有cf文件,注意并不是文件夹,好奇怪,只能先删除(否则提示cf已存在)再重新上川。

hdfs dfs -rm /cf

  然后进入到MapReduceInput文件夹下

hdfs dfs -put CFItemSet /cf

  然后cf是文件夹,下面有itemSet.txt。

  注意上传的文件时userItem.txt,因为是cf的用户项目文件,有时候会因为笔误写错,一定注意。

目录
相关文章
HDFS基本命令及上传文件API
HDFS基本命令及上传文件API
123 0
|
分布式计算 关系型数据库 MySQL
导入 Import--全量数据导入 Hdfs--并行度设置&注意事项 | 学习笔记
快速学习 导入 Import--全量数据导入 Hdfs--并行度设置&注意事项
223 0
导入 Import--全量数据导入 Hdfs--并行度设置&注意事项 | 学习笔记
|
JSON 分布式计算 Hadoop
Structured_Source_HDFS_生成并上传文件到 HDFS | 学习笔记
快速学习 Structured_Source_HDFS_生成并上传文件到 HDFS
|
资源调度 分布式计算 Java
HDFS设计思路,HDFS使用,查看集群状态,HDFS,HDFS上传文件,HDFS下载文件,yarn web管理界面信息查看,运行一个mapreduce程序,mapreduce的demo
26 集群使用初步 HDFS的设计思路 l 设计思想   分而治之:将大文件、大批量文件,分布式存放在大量服务器上,以便于采取分而治之的方式对海量数据进行运算分析;   l 在大数据系统中作用: 为各类分布式运算框架(如:mapreduce,spark,tez,……)提供数据存储服务   l 重点概念:文件切块,副本存放,元数据 26.1 HDFS使用 1、查看集群状态 命令:   h
2660 0
|
2月前
|
分布式计算 Kubernetes Hadoop
大数据-82 Spark 集群模式启动、集群架构、集群管理器 Spark的HelloWorld + Hadoop + HDFS
大数据-82 Spark 集群模式启动、集群架构、集群管理器 Spark的HelloWorld + Hadoop + HDFS
177 6
|
2月前
|
SQL 分布式计算 监控
Hadoop-20 Flume 采集数据双写至本地+HDFS中 监控目录变化 3个Agent MemoryChannel Source对比
Hadoop-20 Flume 采集数据双写至本地+HDFS中 监控目录变化 3个Agent MemoryChannel Source对比
65 3
|
2月前
|
SQL 分布式计算 Hadoop
Hadoop-14-Hive HQL学习与测试 表连接查询 HDFS数据导入导出等操作 逻辑运算 函数查询 全表查询 WHERE GROUP BY ORDER BY(一)
Hadoop-14-Hive HQL学习与测试 表连接查询 HDFS数据导入导出等操作 逻辑运算 函数查询 全表查询 WHERE GROUP BY ORDER BY(一)
48 4
|
2月前
|
存储 分布式计算 资源调度
大数据-04-Hadoop集群 集群群起 NameNode/DataNode启动 3台公网云 ResourceManager Yarn HDFS 集群启动 UI可视化查看 YarnUI(一)
大数据-04-Hadoop集群 集群群起 NameNode/DataNode启动 3台公网云 ResourceManager Yarn HDFS 集群启动 UI可视化查看 YarnUI(一)
78 5

热门文章

最新文章