MapReduce从分片输出到Map

来源:互联网 发布:按键精灵源码 编辑:程序博客网 时间:2024/06/14 04:25
一 输入文件
输入文件是保存在datanode的块中,结构图如下

二 分片输入

三 理想的输入文件

四 节点Map任务的个数
文件1被分成3个分片,文件2被分为1个分片

五 节点Map任务的个数