mapreduce的架构

来源:互联网 发布:java能做什么软件 编辑:程序博客网 时间:2024/04/29 11:00

一主多从结构
主jobtracker(1.x版本有)
负责调度分配每一个子任务task运行于tasktracker上,如果发现有失败的task就重新分配到其他任务节点上,每一个hadoop集群中只有一个jobtracker。
从tasktracker
tasktracker主动与jobtracker通信,接收作业,并负责直接执行每一个任务,为了减少网络带宽,tasktracker最好运行于HDFS的datanode上。

随便一台机器都可以作为jobtracker

0 0