Hadoop启动异常情况整理与解决方案01(能力工场--小马哥整理)

来源:互联网 发布:基因组比对软件 编辑:程序博客网 时间:2024/06/06 02:27

当我们搭建hadoop伪分布式或者集群环境之后,会进行一下验证,以检验我们的环境是否正确搭建完毕.

很多初学hadoop的朋友往往会遇到一点小差错,造成hadoop集群不能正常启动.甚至曾经正确安装hadoop环境的朋友还是会出现以往没有见过的错误.例如这篇文章的作者---小马哥


今天我在将电脑重新清理过后,开始搭建hadoop集群环境,防火墙,ip,主机名,ip与主机名绑定,ssh免密码登录,jdk安装,hadoop安装,..然后开始启动.此处可以省略一万字,然后启动检查安装正确与否!!很熟悉的流程却出现了没有见过的错误---使用web方式查看50070不能没有响应.


很奇怪为什么刚装上的hadoop里面就会有tmp文件夹存在.

分析原因:我的配置保证是没有错误的,唯一可能是在hadoop启动的过程中,出现了未知的运行错误,导致namenode没有启动起来,没有namenode当然去访问50070就打不开了.(这些都不是关键的,关键的是告诉大家一个重要的知识点,如下)

格式化namenode的时候,一定要删除hadoop文件夹下的tmp,否则运行还是照样有错误

解决方法

1,关闭掉hadoop>>>>stop-all.sh

2,删除掉hadoop下的tmp文件夹>>>>rm -r tmp(建议使用WinSCP工具直接操作,比在命令行里面省时间)

3,执行namenode格式化>>>>hadoop namenode -format

然后重新启动hadoop集群并检查结果,一切正常了.