hadoop执行mapreduce过程reduce不执行原因

来源:互联网 发布:nba骑士vs活塞数据 编辑:程序博客网 时间:2024/05/08 18:12

1.如果你的map过程中没有context.write()是不执行reduce过程的;

2.如果你的map过程中context.write()的map后的的部分数据出现问题,不符合reduce接受的数据也会不执行reduce

比如说你的日志文件中有一个空行是不符合reduce的接受数据reduce不执行;

2 0
原创粉丝点击