hadoop集群配置

来源:互联网 发布:淘宝客用红包购物券 编辑:程序博客网 时间:2024/06/02 03:34

参考文档: http://hadoop.apache.org/docs/current/hadoop-project-dist/hadoop-common/ClusterSetup.html


下载hadoop安装 地址:http://apache.fayea.com/hadoop/common/stable/       可以返回上级目录下载新版

解压到目录,/usr/tools/  没有此目录就先创建

cd /usr/tools 

解压 tar -zxvf   hadoop-2.7.3.tar.gz

切换到 hadoop安装目录   cd /usr/tools/hadoop-2.7.3


配置 JAVA_HOME环境  配置如下几个文件   

etc/hadoop/hadoop-env.sh ,etc/hadoop/mapred-env.sh , etc/hadoop/yarn-env.sh 

找到JAVA_HOME  ,注释掉以前的,新起一行 配置自己本机的jdk安装目录

#export JAVA_HOME=${JAVA_HOME}
export JAVA_HOME=/usr/java/jdk1.7.0_79




创建用户组和用户

[root@localhost hadoop-2.7.3]# groupadd hadoop
[root@localhost hadoop-2.7.3]# useradd -g hadoop hadoop
[root@localhost hadoop-2.7.3]# passwd hadoop



给用户添加权限

[root@localhost hadoop-2.7.3]# vi /etc/sudoers

文件内容添加一行

hadoop    ALL=(ALL)       ALL




修改host文件

[root@localhost hadoop-2.7.3]# vi /etc/hosts

 




配置etc/hadoop/core-site.xml





配置etc/hadoop/hdfs-site.xml




配置etc/hadoop/yarn-site.xml




配置 etc/hadoop/mapred-site.xml



所有配置完成后,进入安装目录 hadoop

bin/hdfs namenode -formatsbin/start-all.sh