解决win下eclipse连linux的hadoop集群连不上的问题
来源:互联网 发布:阿里云如何关闭快照 编辑:程序博客网 时间:2024/05/22 09:38
一、windows下的eclipse连接hadoop集群
1.加入eclipse的hadoop插件
下载hadoop-eclipse-plugin-X.jar,并加入到eclipse安装目录的plugins文件夹下
重启eclipse
2.解压hadoop的安装包到win本机
在eclipse中做如下配置
Window → Preferences,找到 Hadoop Map/Reduce
将Hadoop installation directory设置成刚才hadoop安装包的解压路径
重启eclipse
3.配置hadoop连接
选择Map/Reduce Perspective
新建New Hadoop Location,配置相关hadoop环境
重启eclipse
重启后会显示HDFS文件系统的内容
4.新建 Map/Reduce Project
new → Project → Map/Reduce Project
项目中会自动导入解压的hadoop目录下lib文件夹中的jar包
二、解决eclipse连接不上hadoop的问题:
如果eclipse连接hadoop出现Connection refused 错误,ping linux的hadoop集群也能ping通,但telnet到hdfs的端口不通,查看hadoop的linux主机的端口状态,注意使用的IP协议,如果使用IPv6,则做如下配置:
取消linux的IPv6支持:
#vi /etc/modprobe.d/dist.conf
加入以下两行
alias net-pf-10 off
alias ipv6 off
保存退出
重启linux。
启动hadoop集群
用eclipse重新连接hadoop集群
- 解决win下eclipse连linux的hadoop集群连不上的问题
- win系统下的eclipse连接和使用linux上的hadoop集群
- windows下eclipse远程连接linux上的hadoop集群
- windows下的eclipse连接hadoop集群中遇到的问题
- Linux下XAMPP装完之后,Navicat无法连上数据库的问题的解决
- 在win下安装hadoop发生的问题
- hadoop学习之HDFS(2.5):windows下eclipse远程连接linux下的hadoop集群并测试wordcount例子
- hadoop学习之HDFS(2.5):windows下eclipse远程连接linux下的hadoop集群并测试wordcount例子
- Windows下的eclipse(with Hadoop Plug-in)向Linux集群提交MapReduce任务
- Eclipse 运行WordCount实例 (连接Linux下的Hadoop集群)
- Linux下Hadoop集群的搭建(3)—集群模式
- hadoop学习笔记(3)-eclipse下搭建hadoop开发环境各种问题的解决
- RHEL 5下配置Hadoop集群:java.net.NoRouteToHostException: No route to host问题的解决
- RHEL 5下配置Hadoop集群:java.net.NoRouteToHostException: No route to host问题的解决
- RHEL 5下配置Hadoop集群:java.net.NoRouteToHostException: No route to host问题的解决
- php 变量 【PHP_EOL】 解决不同环境(win,linux,unix)下的按回车分隔问题
- Window平台的eclipse连接linux的hadoop集群
- win上eclipse链接hadoop集群
- HDU 4320 Arcane Numbers 1
- ATL揭秘之“对象创建”
- RO IOCP开发心得系列(01):服务器程序防止Socket攻击的解决方案
- C++“靠近定义变量“之真正原因
- Shell 基础大全
- 解决win下eclipse连linux的hadoop集群连不上的问题
- Sql Server按树形结构排序查询表记录(CSDN论坛转载)
- HTTP method POST is not supported by this URL
- 求两点间的距离
- awstats 统计多个域名
- VC++,掀起你的盖头来
- NSArray NSSet NSDictionary
- 蓝牙协议栈
- 我们的目标:高薪高酬