Hadoop常用命令

来源:互联网 发布:meryl streep 人工智能 编辑:程序博客网 时间:2024/05/18 01:00
1.查看Hadoop版本
hadoop version
2.Hadoop2.0 kill任务命令
mapred job -kill 任务ID
3.hadoop banlancer
hadoop balancer -threshold 10
-threshold:HDFS达到平衡状态的磁盘使用率偏差值。如果机器与机器之间磁盘使用率偏差小于10%,就认为HDFS集群已经达到了平衡的状态
4.hadoop跳过回收站直接删除文件
hadoop fs -rmr -skipTrash hdfs目录
5.hadoop查看集群状态
hadoop dfsadmin -report
6.hadoop复制hdfs数据到aws s3
hadoop distcp hdfs://namenode:9000//hdfs-path s3://bucket/dir-path
0 0