linux下单机安装hadoop

来源:互联网 发布:用php做一个表格 编辑:程序博客网 时间:2024/05/22 06:25

OS :fedora17

需要安装的软件:

1)、ssh

2)、java 

3)、hadoop


1、ssh安装

yum install ssh*

建立 SSH KEY: 

$ ssh-keygen -t rsa -P “” (注意不要多加空格或缺少空格)

中途需要安装者选择保存密钥的文件,按回车使用默认的文件就可以了:

Enter file in which to save the key (/root/.ssh/id_rsa):(按回车)

启用SSH KEY:

$ cat /root/.ssh/id_rsa.pub >> /root/.ssh/authorized_keys

/etc/init.d/ssh reload

reload ssh

ssh localhost

2、java安装(见上一篇)

3、hadoop安装

到apache官网下载:hadoop-1.0.4.tar.gz

下载完之后,命令行输入:tar -xzvf hadoop-1.0.4.tar.gz进行解压

重命名为hadoop

cd hadoop

gdit conf/core-site

修改 conf/core-site.xml:

<configuration>

<property>

<name>fs.default.name</name>

<value>hdfs://localhost:9000</value>

</property>

</configuration>


gedit conf/hdfs-site.xml

修改conf/hdfs-site.xml:

<configuration>

<property>

<name>dfs.replication</name>

<value>1</value>

</property>

</configuration>


gedit conf/mapred-site.xml

修改conf/mapred-site.xml:

<configuration>

<property>

<name>mapred.job.tracker</name>

<value>localhost:9001</value>

</property>

</configuration>


hadoop运行需要JDK支持,因此需要配置Java的安装路径

gedit conf/hadoop-env.sh

加入下面一行(由JDK具体安装的路径决定):

export JAVA_HOME=/usr/local/jdk1.6


注:为了避免这个警告:Warning: $HADOOP_HOME is deprecated.需要设置以下环境变量:export HADOOP_HOME_WARN_SUPPRESS=1

创建一个新的分布式文件系统:

bin/hadoop -namenode format





原创粉丝点击