Mapreduce 整个工作机制图

来源:互联网 发布:短信猫用什么网络 编辑:程序博客网 时间:2024/05/29 07:45

转:http://www.aboutyun.com/thread-5641-1-1.html

图中1:表示待处理数据,比如日志,比如单词计数
图中2:表示map阶段,对他们split,然后送到不同分区
图中3:表示reduce阶段,对这些数据整合处理。
图中4:表示二次mapreduce,这个是mapreduce的链式,详细可以看让你真正明白什么是MapReduce组合式,迭代式,链式


0 0