hadoop执行mapreduce过程reduce不执行原因

来源:互联网 发布:js有集合吗 编辑:程序博客网 时间:2024/05/20 02:51

hadoop执行mapreduce过程reduce不执行原因

1.如果你的map过程中没有context.write()是不执行reduce过程的;

2.如果你的map过程中context.write()的map后的的部分数据出现问题,不符合reduce接受的数据也会不执行reduce

比如说你的日志文件中有一个空行是不符合reduce的接受数据reduce不执行;


仅做记录,以备后用!


博文出处:http://blog.csdn.net/u013013024/article/details/52640096