Hadoop0.20.203.0的安装配置

来源：互联网发布：oa免费办公软件编辑：程序博客网时间：2024/05/29 16:58

1、在Apache的官网下载Hadoop的比较稳定的版本，我现在下的是Hadoop0.20.203.0.

2、配置java环境。1.6版本以上。

3、解压Hadoop，设置conf下的hadoop-env.sh，设置里面的JAVA_HOME=/usr/lib/jvm/java-6-sun.

4、export HADOOP_INSTALL=/home/guoguo/hadoop/hadoop-0.20.203.0

5、export PATH=$PATH:$HADOOP_INSTALL/bin (ps：也可以将hadoop的环境变量添加到/etc/profile下，添加后source下就行了)

6、检查运行 hadoop version。

7、如果有版本信息说明安装完成。

8、设置ＳＳＨ无密码验证。

a) ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa

b) cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys

9、分别配置core-site.xml、hdf-site.xml、mapred-site.xml。

a) conf/core-site.xml:

  <configuration>            <property>                <name>fs.default.name</name>                <value>hdfs://localhost:9000</value>            </property>  </configuration>

b) conf/hdfs-site.xml:

  <configuration>            <property>                <name>dfs.replication</name>                <value>1</value>            </property>  </configuration>

c) conf/mapred-site.xml:

  <configuration>            <property>                <name>mapred.job.tracker</name>                <value>localhost:9001</value>            </property>  </configuration>

10、配置masters和slaves文件。因为是伪分布模式，所以两个都用127.0.0.1

11、编辑主机名 /etc/hosts加入

a) 127.0.0.1 master

b) 127.0.0.1 slave

12、启动hadoop（hadoop命令在hadoop目录的bin目录下）

a) hadoop namenode –format

b) start-all.sh

13、在WEB下查看Hadoop的工作情况

a) http://localhost:50070

b) http://localhost:50030