MapReduce设置参数防止超时

1. 如果碰到异常“Task attempt failed to report status for xxx seconds. Killing!”，最可能是碰到死循环了。

2. 如果没有死循环：控制超时的属性是：mapred.task.timeout，默认600000ms，即600s。可以设置成更大的值。可以直接在Jobconf或Configuration中修改（只对本Job起作用），也可以修改mapred-site.xml（对所有Job起作用）。

3. 如果没有死循环，但task执行时间长又不好确定，可以在Reducer或Mapper中主动发送心跳，但需控制发送心跳的频率：

查看文本打印

1. long heartBeatInterval = 100000L;            //主动发心跳的间隔，100s，默认600s超时  
2. long lastProgressTS = 0;                     //上一次发心跳的时间点  
3.       
4. //主动发心跳  
5. if (System.currentTimeMillis() - lastProgressTS > heartBeatInterval) {  
6.     context.progress();  
7.     lastProgressTS = System.currentTimeMillis();  
8. }  

4. 再次，如果对自己的程序有信心不会出现死循环，可以采用更简单的办法：

查看文本打印

1. conf.set("mapred.task.timeout", "0");                        //不检查超时