(17)mapreduce 提交任务两种方式
来源:互联网 发布:淘宝助理上传宝贝显示0 编辑:程序博客网 时间:2024/06/06 06:39
1.本地提交
代码打包到jar里面,上传到服务器,然后用命令行启动
/app/soft/hadoop-2.6.0/bin/hadoop jar /app/soft/hadoop-2.6.0/hadoop.jar com.bigdata.task.keywordCount
2.远程提交
其实YARN是可以通过Java程序向Hadoop集群提交MapReduce任务的。与普通的任务不同的是,远程提交的Job由于读不到服务器上的mapred-site.xml和yarn-site.xml,所以在Job的Configuration里面需要添加一些设置,然后再提交就可以了。
0 0
- (17)mapreduce 提交任务两种方式
- 基于hadoop2.5提交mapreduce任务的几种方式
- 高性能平台上提交任务的两种方式
- 获取Executor提交的并发执行的任务返回结果的两种方式/ExecutorCompletionService使用
- mapreduce程序加队列两种方式
- 提交Mapreduce任务时报错
- Hadoop之MapReduce的两种任务模式
- 两种方式解决表单重复提交
- easyui form 表单提交两种方式
- Form表单提交的两种方式
- form表单的两种提交方式
- form表单提交两种方式
- form的两种提交方式
- git提交代码的两种方式
- form表单提交的两种方式
- Flink提交作业的两种方式
- 两种yarn集群提交方式
- form表单提交的两种方式
- 2017年最佳编程语言学习
- activiti
- ping 原理与ICMP协议
- 小总结git
- 按照权重选择的java算法
- (17)mapreduce 提交任务两种方式
- 使用visio 2010绘制组织结构图
- [leetcode]: 455. Assign Cookies
- 4815: [Cqoi2017]小Q的表格
- poj1163——The Triangle(简单dp)
- Java-try_catch_finally中带有return语句的执行顺序
- Android 面试知识库
- VR/AR动手玩(三):Android使用jni调用opencv
- Linux信号——Sleep函数的模拟实现(利用alarm,pause,sigsuspend函数)