hadoop伪分布式错误经验 eclipse插件配置经验
来源:互联网 发布:java线程结束通知 编辑:程序博客网 时间:2024/06/06 09:07
经过将近1个月的努力,最后终于终于把伪分布式搭建好了在搭建的过程中,学到很多东西,在安装hadoop
所犯错误如下:
一.ssh互连错误
1.ssh连接错误
产生原因 使用交换机而不是路由器
2.第二个节点需要验证密码
产生原因 主节点在链接上第一个节点之后,在第一个节点的控制台下向第二个节点发送密钥
导致第二个节点收到的不是主节点密钥而是第一个节点密钥 故此一直无法验证
二.hadoop搭建错误
这个地方困惑了好久 错误较多
1.没有理清ip 盲目照搬教程 配置各个xml文件错误
2.环境变量错误
路径不正确 对于修改后的环境变量没有使用source命令
3.命令错误
对于start-all.sh命令 尽量使用 直接打开方式 而不是,hadoop文件下./bin/start-al.sh
4.对于伪分布式的搭建 尽量将文件放在简洁的路径当中 环境变量尽可能不包含中文
5.每次重启使用hadoop namenode -format 命令的时候 应把hadoop/tmp下文件尽量删除
6.每次使用hadoop时,都应该把ip再ifconfig检查一遍 确保一致后再启动
三.eclipse插件错误
1.在启动hdfs之后 没有注意打开explore
粗心错误
2.应保证hadoop完全无误并已经启动的情况下 再来使用eclipse 对于hadoop线程编辑 端口号与xml要一致
3.使用验证代码路径与教程灵活一致 不能死板
4.对于hdfs路径的变更 要使用disconnect reconnect来刷新 才能得到正确情况 这个错误耗时好久
四.领悟的大道理
1.一定要专心
2.严格按照教程 尽量不要主观的去修改某些东西
3.尽量避免在一次完整的配置过程中使用多个教程
4.细心
5.坚持
6.不懂就google 多和论坛 群里人交流
7.心静
所犯错误如下:
一.ssh互连错误
1.ssh连接错误
产生原因 使用交换机而不是路由器
2.第二个节点需要验证密码
产生原因 主节点在链接上第一个节点之后,在第一个节点的控制台下向第二个节点发送密钥
导致第二个节点收到的不是主节点密钥而是第一个节点密钥 故此一直无法验证
二.hadoop搭建错误
这个地方困惑了好久 错误较多
1.没有理清ip 盲目照搬教程 配置各个xml文件错误
2.环境变量错误
路径不正确 对于修改后的环境变量没有使用source命令
3.命令错误
对于start-all.sh命令 尽量使用 直接打开方式 而不是,hadoop文件下./bin/start-al.sh
4.对于伪分布式的搭建 尽量将文件放在简洁的路径当中 环境变量尽可能不包含中文
5.每次重启使用hadoop namenode -format 命令的时候 应把hadoop/tmp下文件尽量删除
6.每次使用hadoop时,都应该把ip再ifconfig检查一遍 确保一致后再启动
三.eclipse插件错误
1.在启动hdfs之后 没有注意打开explore
粗心错误
2.应保证hadoop完全无误并已经启动的情况下 再来使用eclipse 对于hadoop线程编辑 端口号与xml要一致
3.使用验证代码路径与教程灵活一致 不能死板
4.对于hdfs路径的变更 要使用disconnect reconnect来刷新 才能得到正确情况 这个错误耗时好久
四.领悟的大道理
1.一定要专心
2.严格按照教程 尽量不要主观的去修改某些东西
3.尽量避免在一次完整的配置过程中使用多个教程
4.细心
5.坚持
6.不懂就google 多和论坛 群里人交流
7.心静
- hadoop伪分布式错误经验 eclipse插件配置经验
- Ubuntu配置hadoop单机+伪分布式环境+eclipse--安装eclipse并配置插件(四)
- hadoop伪分布式配置
- HADOOP伪分布式配置
- hadoop伪分布式配置
- hadoop伪分布式配置
- hadoop伪分布式配置
- Hadoop伪分布式配置
- Hadoop伪分布式配置
- Hadoop伪分布式配置
- Hadoop 伪分布式配置
- hadoop伪分布式配置
- Hadoop伪分布式配置
- Hadoop 伪分布式配置
- hadoop伪分布式配置
- 配置伪分布式Hadoop
- 配置 hadoop 伪分布式
- hadoop伪分布式配置
- AS3 最好的展示MouseEvent.ROLL_OVER and MouseEvent.MOUSE_OVER 的区别
- javaweb 复习小结
- [转载] 五个常用MySQL图形化管理工具
- 삼역(三易)의 혼륜(渾淪)
- 如何降低表的HWM
- hadoop伪分布式错误经验 eclipse插件配置经验
- linux下解压命令大全
- Java 多线程1
- Visual Studio Ultimate 2012 产品密钥
- 人民币金额打印
- 十五周:项目2杨辉三角
- 궁(窮) 변(變) 통(通) 구(久) 변화(變化)와 역(易)
- 关于HTTP使用21端口的问题
- 2013 Linux领域年终大盘点