hadoop的关键进程
来源:互联网 发布:mysql配置环境变量 编辑:程序博客网 时间:2024/06/05 04:10
hadoop集群中主要进程有
master: NameNode, ResourceManager,
slaves: DataNode, NodeManager, RunJar, MRAppMaster,YarnChild
其中 RunJar, MRAppMaster,YarnChild与随着某个job的创建而创建,随着job的完成而终止。它们的作用分别是:
RunJar:完成job的初始化,包括获取jobID,将jar包上传至hdfs等。
MRAppMaster:每个job一个进程,主要跟踪job的运行情况,向RM申请资源等。
YarnChild:运行具体的map/reduce task。
job启动过程:
ResourceManage,NodeManager->RunJar->MRAppMaster->YarnChild
job退出过程:
YarnChild->MRAppMaster->RunJar
即所有的map/reduce均完成后,MRAppMaster才退出,最后RunJar退出,job完成。
master: NameNode, ResourceManager,
slaves: DataNode, NodeManager, RunJar, MRAppMaster,YarnChild
其中 RunJar, MRAppMaster,YarnChild与随着某个job的创建而创建,随着job的完成而终止。它们的作用分别是:
RunJar:完成job的初始化,包括获取jobID,将jar包上传至hdfs等。
MRAppMaster:每个job一个进程,主要跟踪job的运行情况,向RM申请资源等。
YarnChild:运行具体的map/reduce task。
job启动过程:
ResourceManage,NodeManager->RunJar->MRAppMaster->YarnChild
job退出过程:
YarnChild->MRAppMaster->RunJar
即所有的map/reduce均完成后,MRAppMaster才退出,最后RunJar退出,job完成。
0 0
- hadoop的关键进程
- hadoop的关键进程
- hadoop的关键进程
- Hadoop守护进程的关键属性
- hadoop关键进程
- hadoop关键进程
- Hadoop安装的关键
- 已知的Hadoop关键配置
- Hadoop 安装的几个关键点
- 系统关键进程的查看和比较
- linux守护进程的几个关键地方
- linux守护进程的几个关键地方
- linux守护进程的几个关键地方
- hadoop的五个守护进程
- hadoop各个进程的作用
- Hadoop系统的守护进程
- Hadoop的几个守护进程
- hadoop的五个守护进程
- 单片机通信之接收一个完整数据包
- JavaScript程序设计_读书笔记1
- linux系统node.js+express安装
- 技术-Java正则表达式语法与简单实例
- 剑指offer 13. 在O(1)时间删除链表节点
- hadoop的关键进程
- 欢迎使用CSDN-markdown编辑器
- 反射简介
- mysql,命令导入\导出表结构或数据
- spring bean装配 注册动态工厂和静态工厂
- 【加密算法】:教你如何装逼的发朋友圈
- Zookeeper系列(三十二)Zookeeper场景应用之分布式队列
- 手机上传图片横向显示,根据需要进行旋转。
- symbolic referenc converted into a direct reference Resolution