Windows下MyEclipse的Hadoop环境的配置

来源:互联网 发布:大数据分析师招聘 编辑:程序博客网 时间:2024/06/14 14:29
1.需要的插件   下载地址(这是hadoop-2.6.0版本的插件)http://pan.baidu.com/s/1sk8zRAl
https://yunpan.cn/cMJ68b6p9BTqM  访问密码 f824  (这是hadoop-2.6.2版本的插件

关闭myeclipse
将插件复制到MyEclipse -->dropins
打开myeclipse  window-->preferences-->Hadoop Map/Reduce

找到你自己解压后的hadoop路径,如图:

然后到window-->show view-->MapReduce Tools-->Map/Reduce Locations点击Ok
出现一个小象图标,点击右上角添加,


这两个端口很重要,9000是namenode的监听端口,而9001是jobtracker的监听端口,在上图的界面上新建DFS location时候,可以看到Map/Reduce Master  Host是你hadoop机器上的ip地址
Advanced parameters中的file.replication也要改为1,应为我们配置在hdfs-site.xml配置的1
<property>  
        <name>dfs.replication</name>  
        <value>1</value>  
</property> 
点击确定,链接成功之后可以看到hdfs上的文件在myeclipse上可以看到。

如果链接失败,看看是不是以太网ip配置不正确,或者不是在一个网段上。

0 0
原创粉丝点击