记录hadoop几个好用的命令行操作

来源:互联网 发布:查找学位论文的数据库 编辑:程序博客网 时间:2024/06/08 00:39

1. distp

使用方法: hadoop distcp /file1 /file2

说明:在相同的文件系统中并行地复制

2. -dus

使用方法: hadoop fs -dus /file

说明:显示目标文件大小

3. hadoop fsck -locations

说明:查看集群状态,包括副本个数、datanode信息等

3. -setrep

使用方法:hadoop fs -setrep [R]  <path>

说明:改变一个副本的复制份数

示例: hadoop fs -setrep -w 3 -R /file

附:要查看副本的复制份数,可用hadoop fs -ls /file 来查看,其文件信息中第一个数字即为副本复制份数

0 0