linux RedHat系统版本伪分布式安装hadoop2.5.2

来源:互联网 发布:mac启动盘制作 编辑:程序博客网 时间:2024/05/29 11:52

1、安装VM虚拟机

2、安装REDHAT系统

3、配置IP地址,确定能远程登录

修改vi /etc/sysconfig/network-scripts/ifcfg-eth0文件

ONBOOT=yes

IPADDR=192.168.41.100                        //IP地址要查看本机的IP,但是不能相同,例如本机为192.168.41.1,因此设置该虚拟机的IP为192.168.41.100
USERCTL=no
NETMASK=255.255.255.0

4、安装SSH无密码登录

输入命令 ssh-keygen -t rsa  然后一路回车即可

复制到公共密钥中

cp /root/.ssh/id_rsa.pub /root/.ssh/authorized_keys
判断是否成功:
[root@master ~]# ssh localhost
Last login: Thu Oct 20 15:47:22 2016 from 192.168.41.100

5、安装JDK

修改/etc/profile添加:

JAVA_HOME=/usr/java/jdk1.8.0_111
CLASSPATH=$JAVA_HOME/lib/
PATH=$PATH:$JAVA_HOME/bin
export PATH JAVA_HOME CLASSPATH

6、安装hadoop

从官网下载相关tar包,root用户创建目录

/soft

将hadoop的tar包解压到/soft下

7、配置相关变量

修改hadoop-env.sh 增加JAVA_HOME路径

export JAVA_HOME=/usr/java/jdk1.8.0_111

编辑core-site.xml

  1. <property>  
  2.         <name>fs.defaultFS</name>  
  3.         <value>hdfs://localhost:9000</value>  
  4.     </property>

hdfs-site.xml

  1.    <property>  
  2.         <name>dfs.replication</name>  
  3.         <value>1</value>  
  4.     </property> 

进入hadoop路径下,执行mv etc/hadoop/mapred-site.xml.template etc/hadoop/mapred-site.xml
然后编辑mapred-site.xml
  1.     <property>  
  2.         <name>mapreduce.framework.name</name>  
  3.         <value>yarn</value>  
  4.     </property> 

配置yarn-site.xml

  1.    <property>  
  2.         <name>yarn.nodemanager.aux-services</name>  
  3.         <value>mapreduce_shuffle</value>  
  4.     </property> 

进入hadoop路径下,输入bin/hdfs namenode -format


8、启动服务

进入hadoop路径下,输入sbin/start-dfs.sh
进入hadoop路径下,输入sbin/start-yarn.sh

9、验证是否成功

启动后访问http://192.168.1.249:50070/   //dfs前台界面

启动完毕后打开http://192.168.1.249:8088/           //yarn前台界面

0 0
原创粉丝点击