mapreduce的架构
来源:互联网 发布:java能做什么软件 编辑:程序博客网 时间:2024/04/29 11:00
一主多从结构
主jobtracker(1.x版本有)
负责调度分配每一个子任务task运行于tasktracker上,如果发现有失败的task就重新分配到其他任务节点上,每一个hadoop集群中只有一个jobtracker。
从tasktracker
tasktracker主动与jobtracker通信,接收作业,并负责直接执行每一个任务,为了减少网络带宽,tasktracker最好运行于HDFS的datanode上。
随便一台机器都可以作为jobtracker
0 0
- mapreduce的架构
- MapReduce的架构组成
- MapReduce的架构组成
- MapReduce的架构组成
- HDFS的架构和MapReduce的架构
- YARN:下一代MapReduce的架构
- MapReduce架构
- MapReduce架构
- MapReduce架构
- 下一代Apache Hadoop MapReduce框架的架构
- 扩展MapReduce架构的一种尝试
- 下一代Apache Hadoop MapReduce框架的架构
- 深入理解MapReduce的架构及原理
- 深入理解MapReduce的架构及原理
- 下一代Apache Hadoop MapReduce框架的架构
- 深入理解MapReduce的架构及其原理
- MapReduce的架构及工作流程
- MapReduce和Yarn的架构设计
- Java 的synchronized 的复习 一
- [机器学习笔记]Note7--神经网络:学习
- 提示框的实现
- tomcat 应用Message file 'oracle.net.mesg.Message' is missing问题处理
- JAVA常见小问题
- mapreduce的架构
- C#中的读写文件操作函数总结
- c++虚基类
- 面试
- 装饰模式
- Java反射中的范型相关类
- CoordinatorLayout 属性的使用介绍
- AngularJS中ng-class使用方法
- c 排序 汇总