hadoop常见问题汇总(二)
来源:互联网 发布:关闭445端口 编辑:程序博客网 时间:2024/05/16 12:21
在hadoop安装过程中会出现各种小问题,如权限问题等。下面就几个进行分析:
1.
ERROR hdfs.DFSClient: Exception closing file /tmp/input2 : org.apache.hadoop.ipc.RemoteException: java.io.IOException: File /tmp/input2 could only be replicated to 0 nodes, instead of 1理解:这个问题,可以很清楚地看到是有节点没启动或者没连接上。这里replicated 是我们在配置文件中hdfs-site.xml中配置的,单节点都是配置的数字1,这里说应该是0,就说明找不到节点。经过几番折腾,知道是由于datanode节点没开的原因。所以出现这个问题,可以jps看你的节点datanode有没有开,如果没有,就找没开的原因。可以看datanode的日志分析 在/var/...下可以查看。jps之后NameNode SecondaryNameNode DataNode JobTracker TaskTracker都有才是正常的。
2.
关于插件hadoop-eclipse-plugin-1.0.2.jar放到eclipse plugin中之后不能用的问题。这个插件里面缺少jar包,所以需要自己做一个能用的插件,具体参见http://hi.baidu.com/wangyucao1989/blog/item/279cef87c4b37c34c75cc315.html 注意几点,如果是Ubuntu apt-get install 安装的eclipse,那么插件放在/usr/lib/eclipse/plugin 中才有效。还有就是INFO ipc.Client: Retrying connect to server: localhost/127.0.0.1:9000. 出现这个问题,一般是hadoop的配置问题。jps看有没有都开启,然后查看端口配置有没有错误。
- hadoop常见问题汇总(二)
- hadoop常见问题汇总(一)
- VC++常见问题汇总(二)
- hadoop常见问题汇总(陆续更新)
- Hadoop常见问题汇总
- Hadoop 常见问题处理汇总
- Hadoop中常见问题汇总
- Hadoop常见问题汇总-转载
- Kerberos hadoop常见问题汇总
- loadrunner教程及常见问题汇总(二)
- Vmware vSphere(二)常见问题汇总
- WinCE开发常见问题汇总 (二)常规问题
- 移动端开发常见问题解决方案汇总- Javascript技巧(二)
- Hadoop 学习笔记十 常见问题汇总
- Hadoop集群搭建过程中的常见问题(二)
- Hadoop学习常见问题及答案整理(二)
- Hadoop原理汇总(二)——MapReduce
- (一)PHP常见问题汇总
- 思考人生
- 上下滚动条
- 重建表时,遇到ORA-02449: 表中的唯一/主键被外键引用的处理办法
- 汉诺塔
- STL QUEQUE的使用
- hadoop常见问题汇总(二)
- 不怕烧钱怕翻车:雷军与马化腾现场“过招”
- 数据库设计准则(第一、第二、第三范式说明)
- “菜鸟”程序员和“大神”程序员差距在哪里
- 棋盘覆盖
- 磁盘阵列创建vdisk后,present给主机A后,在主机A上看到的是多个设备路径名
- 文件IO、目录操作和标准IO\涉及的函数
- 合并排序
- Android 在一个程序中启动另一个程序