(17)mapreduce 提交任务两种方式

来源:互联网 发布:淘宝助理上传宝贝显示0 编辑:程序博客网 时间:2024/06/06 06:39

1.本地提交

代码打包到jar里面,上传到服务器,然后用命令行启动

/app/soft/hadoop-2.6.0/bin/hadoop jar /app/soft/hadoop-2.6.0/hadoop.jar  com.bigdata.task.keywordCount



2.远程提交

其实YARN是可以通过Java程序向Hadoop集群提交MapReduce任务的。与普通的任务不同的是,远程提交的Job由于读不到服务器上的mapred-site.xml和yarn-site.xml,所以在Job的Configuration里面需要添加一些设置,然后再提交就可以了。

0 0
原创粉丝点击