hadoop环境搭建

来源:互联网 发布:使用数组储存1825 编辑:程序博客网 时间:2024/06/18 15:44

这里用到是centos6.4与hadoop1.2.1版本

1.下载安装文件,使用wget命令

wget  http://mirror.bit.edu.cn/apache/hadoop/common/hadoop-1.2.1/hadoop-1.2.1.tar.gz

这里写图片描述

2.解压安装文件

[root@localhost opt]# tar -zxf hadoop-1.2.1.tar.gz 

3.需要修改配置

这里写图片描述

(1)修改hadoop-env.sh文件

[root@localhost conf]# vi hadoop-env.sh 

这里写图片描述

(2)修改core-site.xml文件

[root@localhost conf]# vi core-site.xml 
<?xml version="1.0"?><?xml-stylesheet type="text/xsl" href="configuration.xsl"?><!-- hadoop目录可以自定义位置,自行创建,name目录会自动生成 --><configuration><property><name>hadoop.tmp.dir</name><value>/hadoop</value></property><property><name>dfs.name.dir</name><value>/hadoop/name</value></property><property><name>fs.default.name</name><value>hdfs://192.168.24.136:9000</value></property></configuration>

这里写图片描述

(3)修改hdfs-site.xml文件

[root@localhost conf]# vi hdfs-site.xml 
<?xml version="1.0"?><?xml-stylesheet type="text/xsl" href="configuration.xsl"?><!-- hadoop目录为之前指定的目录,data目录会自动生成 --><configuration><property><name>dfs.data.dir</name><value>/hadoop/data</value></property></configuration>

(4)修改mapred-site.xml文件

[root@localhost conf]# vi mapred-site.xml 
<?xml version="1.0"?><?xml-stylesheet type="text/xsl" href="configuration.xsl"?><!-- Put site-specific property overrides in this file. --><configuration><property><name>mapred.job.tracker</name><value>192.168.24.136:9001</value></property></configuration>

4.配置环境变量

[root@localhost conf]# vi /etc/profile

这里写图片描述

使配置生效

[root@localhost conf]# source /etc/profile

输入hadoop命令查看是否配置成功

这里写图片描述

5.进入bin目录格式化namenode

这里写图片描述

[root@localhost bin]# hadoop namenode -format

6.启动

[root@localhost bin]# start-all.sh

这里写图片描述

这里写图片描述

原创粉丝点击