Hadoop DataNode 无法连接到主机NameNode
来源:互联网 发布:管家婆无法连接数据库 编辑:程序博客网 时间:2024/05/16 12:25
搭建hadoop 完全分布式,踩过的坑;其中一个坑,就是slave节点,不能够连接到master;
第一个:提示无法注册到master 主机:
查看DataNode 可知是不是这个问题;在查看日志的时候,发现是知道master IP;端口和IP都是对的;就一直没往配置主机的方面想;结果发现错在配置;
这个问题是在配置文件 core-site.xml:
<configuration> <property> <name>fs.defaultFS</name> <value>hdfs://localhost:9000</value> </property></configuration>
这是监听 本机端口的;
解决方法:把localhost换成 主机名(记得添加hosts 主机ip映射)
第二个坑:就是nameNode 拒绝连接 ;
一开始还怀疑是这个属性的问题dfs.hosts /
查看说明是值为空是允许所有的slave连接;
排除了
网上查不到能解决的方法;在查看日志时,发现了hostname
结果发现是hadoop 需要用到主机名:突然觉得这是个神坑;知道ip还要主机名的;
然后去配置master的hosts文件,把主机名映射添加上去;
结果顺利连接到master;
遇到错误;如果网上没有找到能解决问题的方法,那么日志是能帮助解决问题的最直接资料;
其他网友遇到过:id不一致的,还有防火墙的问题;解决方案参考其他网友的。防火墙的直接设置就好;id不正确的;可尝试去datanode节点修改节点UUID(我没试过,不过在目录找到VSERSION文件可查看到ID);
如果使用ubuntu的,连接不上还有一个坑,DataNode 正常启动,但是在web管理页面只看到一个,在日志中看到还是datanode无法连接到namenode那时因为hosts映射问题:
在/etc/hosts文件中有一个回环地址 127.0.1.1 ,吧这个去掉,换成正常的ip与主机名;
- Hadoop DataNode 无法连接到主机NameNode
- Hadoop DataNode 无法连接到主机NameNode
- Hadoop NameNode无法连接DataNode
- 部署hadoop后,datanode无法连接namenode
- Hadoop DataNode, NameNode无法启动
- hadoop DataNode无法连接NameNode问题,注意/etc/hosts内容
- 停电后hadoop集群重启 DataNode无法连接NameNode
- Hadoop配置datanode无法连接到master
- hadoop namenode和datanode无法启动
- Hadoop的namenode datanode无法启动
- Hadoop无法启动NameNode和DataNode
- hadoop datanode 连接namenode的问题
- hadoop:datanode连接不上namenode
- 如何解决Hadoop集群环境下DataNode无法连接NameNode问题
- 如果datanode连接不上namenode,导致datanode无法启动。
- Hadoop(04) NameNode、DataNode
- namenode & datanode 无法启动
- hadoop namenode -format 后出现datanode 无法启动故障解决办法
- wifi 简单实习
- 解决 Source Insight中的parse too complex问题
- ES6焦点图(已实现)
- JDBCUtils 的通用代码
- java web在linux环境下上传文件出现的一些问题
- Hadoop DataNode 无法连接到主机NameNode
- LeetCode 41. First Missing Positive
- |UVA 11729|贪心|Commando War
- java核心编程笔记
- hosts和DNS等网络设置
- shell中变量的定义
- telnet不是内部或外部命令怎么办
- shiro--简单入门
- 多线程-线程池的概述和使用