eclipse+hadoop环境配置

来源:互联网 发布:毛笔字生成软件 编辑:程序博客网 时间:2024/06/05 02:54
1、参看linux位数
getconf LONG_BIT

2、安装hadoop
我在ubuntu虚拟机上安装的hadoop,通过文件共享的方式将hadoop解压到虚拟机中的目录/solf/hadoop/

并将hadoop配置成伪分布模式(请查看我的另一篇博文"配置hadoop伪分布模式“

http://blog.csdn.net/baidu_26611019/article/details/72848435)


3、linux版eclipse
推荐去CSDN下载
eclipse-jee-neon-3-linux-gtk-x86_64.tar.gz 
注意:最新的eclipse neon版本要求JDK版本为1.8.x

4、hadoop插件
我用的hadoop版本号为 hadoop2.7.2 对应的插件为
hadoop-eclipse-plugin-2.7.2.jar

5、安装eclipse
同样通过文件共享的方式将eclipse解压到指定的目录  /home/{user}/eclipse
并将hadoop-eclipse-plugin-2.7.2.jar复制到home/{user}/eclipse/plugin目录下

其中{user}表示用户名


6、eclipse配置
运行eclipse
(1)创建一个Map/Reduce windows->Perspective -> Open Perspective -> Other 选择Map/Reduce 确定
(2)右下角大象图标 new Hadoop localtion  或者在空白位置右击选择 new Hadoop localtion
(3)在弹出的窗口中配置host和port
启动hadoop  start-all.sh
在浏览器中访问:localhost:50070 可查看 DFS master中Port的值
Map/Reduce(V2)Master:
Host: localhost
Port:50070

DFS master:勾选Use M/R Master host
Host: localhost
Port: 查询得到的结果

7、自此eclipse中配置hadoop完成,如果要创建Hadoop工程需要配置

windows->Perferences 选择Hadoop Map/Reduce 右侧浏览hadoop的安装目录以便创建工程时自动导入所需的类库




原创粉丝点击