hadoop提交任务过程

来源:互联网 发布:上帝悖论 知乎 编辑:程序博客网 时间:2024/05/16 14:17

1.向resourcemanager申请一个applicationID

2.检查output的情况(比如是否有指定output文件夹,output文件夹是否存在)

3.检查input
4.把运行jar文件需要的资源拷贝到hdfs上(jar文件默认会被复制十份,由mapreduce.client.submit.file.replication确定)
0 0
原创粉丝点击