bin目录下hadoop脚本使用

来源:互联网 发布:如何求最大公约数 算法 编辑:程序博客网 时间:2024/05/01 15:45

一、Hadoop脚本使用方法

hadoop [--config confdir] COMMAND

--config 用于设置Hadoop配置文件目录,默认目录为%{HADOOP_HOME}/conf

COMMAND 命令


二、具体操作

1. HDFS管理命令

bin/hadoop command [genericOptions] [commandOptions]

例:在HDFS上创建一个目录 /test

bin/hadoop fs -mkdir /test


2. 作业管理命令:

bin/hadoop command [genericOptions] [commandOptions]

例:显示hadoop上所有正在运行的作业

bin/hadoop job -list

3.作业提交命令

hadoop jar <jar> [mainClass] args

例:采用拟蒙特卡洛法估算圆周率大小,输入参数为Map Task数目和样本数目

bin/hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-*.jar pi 5 10




0 0
原创粉丝点击