Ubuntu 14.04下hadoop 2.2.0 伪分布环境配置datanode不能启动的解决办法
来源:互联网 发布:风云2翅膀进阶数据 编辑:程序博客网 时间:2024/05/03 03:23
第一次写博客,就当给自己做个笔记了。
毕业论文要用到hadoop,所以在自己笔记本上搭建一个伪分布式环境。
配置的方法网上很多,这里就不写了。注意要把防火墙关掉:sudo ufw disable。
配置完成后,格式化namenode,然后启动hdfs和yarn。
通过jps查看hadoop进程,发现唯独少了datanode的进程,所以运行测试例子的时候报错:could only be replicated to > 0 nodes, instead of 1。
问题产生的原因应该是我重复格式化namenode导致namenode和datanode的id不匹配了。
通过查看启动datanode时的日志文件,发现是namenode和datanode的clusterID不一致造成datanode无法启动。
解决方法是找到 /hadoop/dfs/name/current/VERSION中namenode的clusterID,赋给datanode的clusterID,这样即可启动datanode了。
2 0
- Ubuntu 14.04下hadoop 2.2.0 伪分布环境配置datanode不能启动的解决办法
- 关于配置伪分布hadoop无法启动datanode的解决
- 单机伪分布下的hadoop+spark 环境配置
- Hadoop错误1_Hadoop分布式及伪分布式下DataNode不能启动的问题
- hadoop伪分布式下 无法启动datanode的原因及解决办法
- Spark + Hadoop-2.2.0 伪分布环境下的环境搭建
- hadoop伪分布式下 无法启动datanode的原因
- Hadoop在Ubuntu下伪分布模式配置全过程
- ubuntu下hadoop搭建(2) 伪分布模式配置
- 在Ubuntu下安装与配置hadoop(伪分布)
- 在Ubuntu下安装与配置hadoop(伪分布)
- Hadoop 2.2.0 伪分布环境搭建
- ubuntu 12.04下伪分布安装hadoop启动不成功的解决之道(一)
- Hadoop伪分布环境搭建(Ubuntu)
- hadoop的伪分布环境配置(2.5.2)
- 在伪分布hadoop-1.2.1环境下配置hive-0.12.0
- 使用eclipse连接ubuntu下伪分布的hadoop
- Ubuntu下hadoop伪分布模式搭建
- Nginx配置文件nginx.conf中文详解(总结)
- 剑指officer第二题:题目:设计一个类,我们只能生成该类的一个实例(五种方法实现)
- hdu 4635 Strongly connected (tarjan)
- C# 鼠标全局钩子
- struts2中用jquery、ajax实现下拉框的级联
- Ubuntu 14.04下hadoop 2.2.0 伪分布环境配置datanode不能启动的解决办法
- 堆(heap)
- MySQL Study之--MySQL下图形工具的使用(MySQL Query Browser)
- js的原型(prototype)的相关笔记(一)
- poj 2840
- Unity3D技术之深入了解光照贴图详解
- udt4 helloworld
- cloud foundry pivotal
- Android Fragment 真正的完全解析(上)