解决hadoop集群环境datanode无法启动的问题
来源:互联网 发布:怎么搜人名找域名 编辑:程序博客网 时间:2024/05/14 08:01
问题描述:
在集群模式下更改节点后,启动集群发现 datanode一直启动不起来。
我集群配置:有3个节点,其中第三台的datanode没有启动
其他均已经正常启动,利用 master:50070 , Live Nodes 为2, 随进入pc3:
ssh pc3.hadoop, 输入命令 jps ,发现只有 没有DataNode。随后看日志
上网查找解决方法,最后终于解决了,解决方法如下:
1. 先执行stop-all.sh暂停所有服务
2. 将所有Salve节点上的tmp(即 hdfs-site.xml 中指定的 dfs.data.dir 文件夹,DataNode存放数据块的位置)、 logs 文件夹删除 , 然后重新建立tmp , logs 文件夹
3. 将所有Salve节点上的/usr/hadoop/conf下的core-site.xml删除,将master节点的core-site.xml文件拷贝过来,到各个Salve节点
4. 重新格式化: hadoop namenode -format(在更改slaves文件后,重新格式化一下namenode,基本上就不会有问题了)
5. 启动:start-all.sh
注:这是我碰到的情况,不见得是你遇到的问题,基本上从以下几个方面解决问题:
1. 检查各个xml文件是否配置正确
2. java环境变量配置是否正确
3. ssh是否无密码互通
4, Hadoop离开安全模式,hadoop dfsadmin -safemode leave。
在集群模式下更改节点后,启动集群发现 datanode一直启动不起来。
我集群配置:有3个节点,其中第三台的datanode没有启动
其他均已经正常启动,利用 master:50070 , Live Nodes 为2, 随进入pc3:
ssh pc3.hadoop, 输入命令 jps ,发现只有 没有DataNode。随后看日志
上网查找解决方法,最后终于解决了,解决方法如下:
1. 先执行stop-all.sh暂停所有服务
2. 将所有Salve节点上的tmp(即 hdfs-site.xml 中指定的 dfs.data.dir 文件夹,DataNode存放数据块的位置)、 logs 文件夹删除 , 然后重新建立tmp , logs 文件夹
3. 将所有Salve节点上的/usr/hadoop/conf下的core-site.xml删除,将master节点的core-site.xml文件拷贝过来,到各个Salve节点
复制代码
4. 重新格式化: hadoop namenode -format(在更改slaves文件后,重新格式化一下namenode,基本上就不会有问题了)
5. 启动:start-all.sh
注:这是我碰到的情况,不见得是你遇到的问题,基本上从以下几个方面解决问题:
1. 检查各个xml文件是否配置正确
2. java环境变量配置是否正确
3. ssh是否无密码互通
4, Hadoop离开安全模式,hadoop dfsadmin -safemode leave。
阅读全文
1 0
- 解决hadoop集群环境datanode无法启动的问题
- Hadoop集群无法启动datanode的解决方法
- hadoop 平台解决datanode无法启动问题
- 如何解决Hadoop集群环境下DataNode无法连接NameNode问题
- hadoop datanode无法启动问题
- hadoop无法启动DataNode问题
- hadoop集群配置datanode无法启动的原因
- hadoop集群无法启动datanode节点
- 安装hadoop集群无法启动datanode
- 解决hadoop集群中datanode启动后自动关闭的问题
- 解决hadoop集群中datanode启动后自动关闭的问题
- 解决hadoop集群中datanode启动后自动关闭的问题
- 解决启动hadoop时datanode无法启动
- 解决启动hadoop时datanode无法启动
- hadoop的datanode无法启动
- Hadoop的datanode无法启动
- Hadoop的datanode无法启动
- Hadoop 在重启或者多次格式化后无法启动datanode问题的解决
- string的erase用法
- 浅析OopMap
- hdu 6044 dfs+组合数
- Java File类引入
- log4j2的xml配置文件详解 (2)
- 解决hadoop集群环境datanode无法启动的问题
- Ajax
- Shader水涟漪效果
- AndroidRecyclerviewGridLayoutManager列间距
- 神经网络
- 约瑟夫环问题
- Unity Shader学习笔记:纹理动画
- 第十次多校联合hdu6178Monkeys(输入输出挂)
- C++中尽量使用C++提供的类型转换(2)---《More Effective C++》