hadoop jobtracker与tasktracker
来源:互联网 发布:win7卸载软件出错 编辑:程序博客网 时间:2024/05/21 21:40
jobtracker对应namenode
tasktracker对应datanode
DataNode 和NameNode 是针对数据存放来而言的
JobTracker和TaskTracker是对于MapReduce执行而言的
mapreduce中几个主要概念,mapreduce整体上可以分为这么几条执行线索:
jobclient,JobTracker与TaskTracker。
1、JobClient会在用户端通过JobClient类将应用已经配置参数打包成jar文件存储到hdfs,并把路径提交到Jobtracker,然后由JobTracker创建每一个Task(即MapTask和ReduceTask)并将它们分发到各个TaskTracker服务中去执行
2、JobTracker是一个master服务,软件启动之后JobTracker接收Job,负责调度Job的每一个子任务task运行于TaskTracker上,并监控它们,如果发现有失败的task就重新运行它。一般情况应该把JobTracker部署在单独的机器上。
3、TaskTracker是运行在多个节点上的slaver服务。TaskTracker主动与JobTracker通信,接收作业,并负责直接执行每一个任务。
TaskTracker都需要运行在HDFS的DataNode上
0 0
- hadoop jobtracker与tasktracker
- Hadoop jobTracker taskTracker 与task 的联系
- Hadoop JobTracker和TaskTracker
- Hadoop之JobTracker,TaskTracker,Scheduler
- JobTracker与TaskTracker的关系
- JobTracker与TaskTracker的关系
- hadoop之JobTracker,TaskTracker,hadoop调度器
- hadoop之JobTracker,TaskTracker,hadoop调度器
- HADOOP MR架构分析 JobTracker 和 TaskTracker
- hadoop中NameNode、DataNode、Secondary、NameNode、JobTracker TaskTracker介绍
- hadoop中NameNode、DataNode、Secondary、NameNode、JobTracker TaskTracker介绍
- hadoop中NameNode、DataNode、Secondary、NameNode、JobTracker TaskTracker介绍
- hadoop中NameNode、DataNode、Secondary、NameNode、JobTracker TaskTracker介绍
- hadoop中NameNode、DataNode、SecondaryNameNode、JobTracker 、TaskTracker介绍
- hadoop中NameNode、DataNode、Secondary、NameNode、JobTracker TaskTracker介绍
- hadoop中NameNode、DataNode、Secondary、NameNode、JobTracker TaskTracker介绍
- hadoop中NameNode、DataNode、Secondary、NameNode、JobTracker TaskTracker介绍
- hadoop中NameNode、DataNode、Secondary、NameNode、JobTracker TaskTracker介绍
- thinkphp的静态缓存使用方法
- MySQL中安装样本数据库Sakila过程
- 百分制成绩
- Android 自定义theme
- FineReport报表工具实现报表多值查询
- hadoop jobtracker与tasktracker
- 整合91平台接入的ANE
- printf输出格式
- spring3.0.5与quartz1.8.4的集成详细说明
- 第十六周项目二(1)补充
- [android基础知识] 之九: activity的四种状态
- SQLSERVER误删Windows登录用户验证方式使用Windows身份验证的解决方法
- Java解析csv文件
- 关注的股票资源