window下Eclipse配置联调hadoop1.0.3集群
来源:互联网 发布:歼31黑烟 知乎 编辑:程序博客网 时间:2024/06/07 05:00
前序:因在widow下用Eclipse联调hadoop2.2.0运行程序没有成功,网上暂时解决办法不多,就折中了下,连接hadoop1.0.3伪分布式
一。用到的环境和工具
1.Eclipse采用的是indio版本,这个可以用官网下载
2.Eclipse hadoop插件:hadoop-eclipse-plugin-1.0.3.jar,
下载地址:http://download.csdn.net/detail/lifuxiangcaohui/7963261
二.安装hadoop1.0.3伪分布式
1.安装SSH免登录
安装JDK等等:查看我早期的安装hadoop2.20的笔记(都是运行成功的):http://blog.csdn.net/lifuxiangcaohui/article/details/21635791
2.配置hadoop1.0.3相应的配置文件:
2.1修改Hadoop核心配置文件core-site.xml,配置HDFS的地址和端口号
vi conf/core-site.xml
<configuration>
<property>
<name>fs.default.name</name>
<value>hdfs://localhost:9000</value>
</property>
</configuration>
2.2修改Hadoop中HDFS的配置,修改replication
vi conf/hdfs-site.xml
<configuration>
<property>
<name>dfs.replication</name>
<value>1</value>
</property>
</configuration>
2.3修改Hadoop中MapReduce的配置文件,配置的是JobTracker的地址和端口
vi conf/mapred-site.xml
<configuration>
<property>
<name>mapred.job.tracker</name>
<value>localhost:9001</value>
</property>
</configuration>
3格式化Hadoop的文件系统HDFS
bin/hadoop namenode -format
4,启动hadoop
bin/start-all.sh
5.最后,验证Hadoop是否安装成功。打开浏览器,分别输入一下网址:
http://localhost:50030 (MapReduce的Web页面)
http://localhost:50070 (HDfS的web页面)
如果都能查看,说明安装成功。
三。配置本地Eclipse
可以看我转载的一篇超详细的文章:http://blog.csdn.net/lifuxiangcaohui/article/details/39500131
由于时间有限,写的文章有些粗糙和懒,还请谅解
- window下Eclipse配置联调hadoop1.0.3集群
- Hadoop1.0.3 集群配置
- Hadoop1.2.1集群配置
- windows下Eclipse安装hadoop1.1.2插件连接hadoop集群
- windows下Eclipse安装hadoop1.1.2插件连接hadoop集群
- 集群环境下配置hadoop1.0,zookeeper,hbase
- win7下eclipse集成hadoop1.0.3
- window下eclipse ndk配置
- Window下用Apache2配置jboss集群
- Window下安装redis和配置集群
- Window下Eclipse远程访问伪分布式hadoop1.2.1测试WordCount
- Ubuntu12.04配置Hadoop1.1.2集群
- hadoop1.x配置 - 集群增加datanode
- hadoop1.x配置 - 集群删除datanode
- Hadoop1.2.1集群安装配置笔记
- 十七、Hadoop1.0伪集群安装(下)
- window下配置Python+ Django + Eclipse环境
- eclipse hadoop1.2.0配置及wordcount运行
- ORACLE高水位线
- android开发环境搭建
- 面试感悟
- php mssql 存储过程
- Monkey Test 命令使用
- window下Eclipse配置联调hadoop1.0.3集群
- linux系统用户态和内核态及其通信
- Qt常用类
- 创建型--工厂模式
- 改变解决问题的思维(1)
- 【黑马程序员】抽象类与接口(五)
- iOS静态库的编译
- [Oracle]函数,过程,触发器的误删除的恢复
- div中input宽度自适应