HDFS命令

HDFS文件操作命令

1、列出HDFS文件

bin/hadoop dfs -ls

在HDFS中未带参数的-ls命令没有返回任何值，它默认返回HDFS的“home”目录下的内容，在HDFS中，没有当前目录这一概念，也没有cd命令。

2、列HDFS目录下某个文档中的文件

bin/hadooop dfs -ls in

3、上传文件到HDFS

bin/hadoop dfs -put test1 test

将hadoop目录下的test1文件上传到HDFS上并重命名为test

4、将HDFS中的文件复制到本地系统中

bin/hadoop dfs -get in getin

将HDFS中的in文件复制到本地系统并命名为getin

5、删除HDFS下的文档

bin/hadoop dfs -rmr out

删除HDFS下名为out的文档

6、查看HDFS下某个文件

bin/hadoop dfs -cat in/*

查看HDFS下in文件中的内容

7、报告HDFS的基本统计信息

bin/hadoop dfsadmin -report

8、退出安全模式

bin/hadoop dfsadmin -safemode leave

9、进入安全模式 

bin/hadoop dfsadmin -safemode enter

sudo addgroup Hadoop#添加一个hadoop组
sudo usermod -a -G hadoop larry#将当前用户加入到hadoop组
sudo gedit etc/sudoers#将hadoop组加入到sudoer
在root ALL=(ALL) ALL后 hadoop ALL=(ALL) ALL

修改hadoop目录的权限
sudo chown -R larry:hadoop /home/larry/hadoop<所有者：组 文件>

sudo chmod -R 755 /home/larry/hadoop

修改hdfs的权限
sudo bin/hadoop dfs -chmod -R 755 /
sudo bin/hadoop dfs -ls /

修改hdfs文件的所有者

sudo bin/hadoop fs -chown -R larry /

 

sudo bin/hadoop dfsadmin -safemode leave #解除hadoop的安全模式

 

 

hadoop fs -copyFromLocal <localsrc> URI#拷贝本地文件到hdfs

hadoop fs -cat file:///file3 /user/hadoop/file4#将路径指定文件的内容输出到stdout

hadoop fs -chgrp [-R] GROUP URI#改变文件的所属组

hadoop fs -chmod [-R] 755 URI#改变用户访问权限

hadoop fs -chown [-R] [OWNER][:[GROUP]] URI [URI ]#修改文件的所有者

hadoop fs -copyToLocal URI localdst#拷贝hdfs文件到本地

hadoop fs -cp URI [URI …] <dest>#拷贝hdfs文件到其它目录

hadoop fs -du URI [URI …]#显示目录中所有文件的大小

hadoop fs -getmerge <src> <localdst> [addnl]#合并文件到本地目录