Hadoop 学习笔记八 任务远程提交--Java远程提交

来源:互联网 发布:东莞市知美整形医院 编辑:程序博客网 时间:2024/05/22 20:14

Hadoop运行计算任务,大概有以下几种方式

  1. 把MapReduce任务打包到jar里,上传到服务器,用命令行启动
  2. 通过Java向Hadoop集群提交MapReduce任务
  3. 服务器的hadoop配置拷到本地,设置hosts指向namenode和resourcemanager,本地执行hadoop jar
  4. 任务做成schedule,定时调用shell脚本运行java任务
  5. Eclipse的hadoop插件

本文介绍第2种方式

0 0
原创粉丝点击