ubuntu 上安装hadoop2.4.1

来源：互联网发布：缩小手机屏幕的软件编辑：程序博客网时间：2024/05/16 06:28

1 配置jdk等（hadoop也一起配置） gedit /ect/profile

export JAVA_HOME=/installDev/jdk1.7.0_25
export HADOOP_HOME=/installDev/hadoop-2.4.1
export JRE_HOME=$JAVA_HOME/jre
export CLASSPATH=$JAVA_HOME/lib:$JRE_HOME/lib:CLASSPATH
export PATH=$JAVA_HOME/bin:$JRE_HOME/bin:$HADOOP_HOME/sbin:$HADOOP_HOME/bin:$PATH

2 配置 core-site.xml /installDev/hadoop-2.4.1/etc/hadoop

<configuration>
<property>
<name>fs.defaultFS</name>
<value>hdfs://192.168.1.111:9000</value>
</property>
<property>
<name>hadoop.tmp.dir</name>
<value>/installDev/hadoop-2.4.1/tmp</value>
</property>
</configuration>

3 配置 hdfs-site.xml

<configuration>
<property>
<name>dfs.replication</name>
<value>1</value>
</property>
</configuration>

4 配置 mapred-site.xml

<configuration>
<property>
<name>mapreduce.framework.name</name>
<value>yarn</value>
</property>
</configuration>

5 配置 yarn-site.xml

<configuration>
<property>
<name>yarn.resourcemanager.hostname</name>
<value>192.168.1.111</value>
</property>
<property>
<name>yarn.nodemanager.aux-services</name>
<value>mapreduce_shuffle</value>
</property>
</configuration>

6 格式化HDFS ,data 的tmp文件很自动生成
hadoop namenode -format

7 启动

到sbin 目录

start-dfs.sh 或 start-all.sh

7.1 看端口

netstat -nltp

8 验证 jps

还可以通过浏览器的方式验证
http://192.168.1.111:50070 (hdfs管理界面)
http://192.168.1.111:50030 (mr管理界面)

0 0