HDFS常用操作

来源:互联网 发布:疯狂的美工好用吗 编辑:程序博客网 时间:2024/05/16 01:26

1.列出HDFS文件

hdfs dfs -ls <path>

2.上传文件到hdfs

hdfs dfs -put <local file> <hdfs file>example: hdfs dfs -put test1 /input/test  把当前本地目录下的test1文件上传到HDFS /input目录下,并命名为test

3.将HDFS中的文件复制到本地系统中

hdfs dfs -get <hdfs file> <local file or dir>

local file不能和 hdfs file名字不能相同,否则会提示文件已存在,没有重名的文件会复制到本地

hdfs dfs -get <hdfs file or dir> ... <local  dir>

拷贝多个文件或目录到本地时,本地要为文件夹路径

4.删除文件

hdfs dfs -rm <hdfs file>hdfs dfs -rm -r <hdfs dir>

5.查看HDFS下的某个文件

hdfs dfs -cat <hdfs file>

6.创建HDFS目录

hdfs dfs -mkdir <hdfs path>

只能一级一级的建目录,父目录不存在的话使用这个命令会报错

hdfs dfs -mkdir -p <hdfs path> 

所创建的目录如果父目录不存在就创建该父目录

7.复制文件

hdfs dfs -cp  <hdfs file>  <hdfs file>

8.移动文件

hdfs dfs -mv <hdfs file>  <hdfs file> 

当两个文件的父路径相同时, 作用相当于文件重命名

原创粉丝点击