Hadoop入门(1)
来源:互联网 发布:翻卦掌诀推算法 编辑:程序博客网 时间:2024/05/20 17:42
几天前开始学习hadoop,从今天起,想把我学习hadoop全过程记录一下。我会记录在学习过程中碰到的问题、困难以及解决方法等等,如果你也是刚学hadoop,我们可以一起讨论。
学了几天,好像入门了,在这里和大家分享,就当全程笔记的第一篇吧。
新说明一下我的开发环境
操作系统:在windows下使用wubi安装了ubuntu 10.10
hadoop版本:hadoop-0.20
Hadoop 快速入门文档:http://hadoop.apache.org/common/docs/r0.18.2/cn/quickstart.html
上面这个地址是最新hadoop快速入门,基本上按照里面步骤能快速入门hadoop,但这篇文档是针对hadoop 0.18写的,有些地方还是和hadoop 0.20不同。在文档“伪分布式模式的操作方法”中有下面配置说明:
在这里,你会发现在hadoop 0.20中并不存在conf/hadoop-site.xml文件,所以,如果你使用高版本的hadoop就要修改为下面的配置:
只要在这里注意一下,再按照“hadoop快速入门”文档就能对hadoop快速入们了。
学了几天,好像入门了,在这里和大家分享,就当全程笔记的第一篇吧。
新说明一下我的开发环境
操作系统:在windows下使用wubi安装了ubuntu 10.10
hadoop版本:hadoop-0.20
Hadoop 快速入门文档:http://hadoop.apache.org/common/docs/r0.18.2/cn/quickstart.html
上面这个地址是最新hadoop快速入门,基本上按照里面步骤能快速入门hadoop,但这篇文档是针对hadoop 0.18写的,有些地方还是和hadoop 0.20不同。在文档“伪分布式模式的操作方法”中有下面配置说明:
- 配置
- 使用如下的 conf/hadoop-site.xml:
- <configuration>
- <property>
- <name>fs.default.name</name>
- <value>localhost:9000</value>
- </property>
- <property>
- <name>mapred.job.tracker</name>
- <value>localhost:9001</value>
- </property>
- <property>
- <name>dfs.replication</name>
- <value>1</value>
- </property>
- </configuration>
在这里,你会发现在hadoop 0.20中并不存在conf/hadoop-site.xml文件,所以,如果你使用高版本的hadoop就要修改为下面的配置:
- 配置
- 使用如下的 conf/core-site.xml:
- <configuration>
- <property>
- <name>fs.default.name</name>
- <value>hdfs://localhost:9000</value>
- </property>
- </configuration>
- 配置
- 使用如下的 conf/hdfs-site.xml:
- <configuration>
- <property>
- <name>dfs.replication</name>
- <value>1</value>
- </property>
- </configuration>
- 配置
- 使用如下的 conf/mapred-site.xml:
- <configuration>
- <property>
- <name>mapred.job.tracker</name>
- <value>localhost:9001</value>
- </property>
- </configuration>
只要在这里注意一下,再按照“hadoop快速入门”文档就能对hadoop快速入们了。
- Hadoop入门(1)
- Hadoop(1)入门
- Hadoop快速入门(1)
- Hadoop入门(1):安装Hadoop
- Hadoop学习全程记录(1)-hadoop入门
- hadoop入门篇-简介(1)
- hadoop入门1
- Hadoop入门基础知识[1]
- Hadoop入门操作1
- Hadoop入门学习(1)
- Hadoop入门(转)
- Hadoop入门(转)
- Hadoop入门(2)
- hadoop入门(一)
- hadoop入门(二)
- Hadoop入门系列(1) -- Hadoop简介
- hadoop入门三(基础知识入门)
- hadoop入门四(基础知识入门)
- 北大ACM poj3632 Optimal Parking
- 虚拟机的linux 系统ping不通主机windows 7
- An incompatible version 1.1.14 of APR based Apache Tomcat Native library is installed, while Tomcat
- WLAN 知 识 荟 萃
- 参加ios/Android Devcamp有感
- Hadoop入门(1)
- 2012.7.29总结
- Hadoop入门(2)
- 子数组之和的最大值
- 在Linux机上读取JAVA lib的Shell语句
- 系统登录对话框小结
- Can't start a cloned connection while in manual transaction mode
- 中国移动WLAN解决方案
- 构建自己的监测器【4】-java -D参数使用