Hadoop中出现“Exceeded MAX_F…

来源:互联网 发布:手机淘宝如何申请退货 编辑:程序博客网 时间:2024/06/05 04:46
 在尝试运行wordcount的时候 出现以下的error
 
Hadoop中出现“Exceeded <wbr>MAX_FAILED_UNIQUE_FETCHES”

map100%,证明map阶段没有问题,问题出在reduce阶段,从jobtracker中获取任务,并且会获得map的服务器地址,而这个地址是map的主机名字,不是IP地址,因此我们需要在host文件中添加map主机hostname的ipmapping
 
解决办法:
在hosts文件中 添加hostname的ip地址
 
Hadoop中出现“Exceeded <wbr>MAX_FAILED_UNIQUE_FETCHES”

backup* 是我在master 和 slave中配置的名字
hadoop* 是我的linux hostname
 
真正实验的时候 我在每一台linux都分别配置了以上文件 不清楚是否只需要在主机配置即可解决
 
配置hosts后  需要重启
0 0
原创粉丝点击