linux RedHat系统版本伪分布式安装hadoop2.5.2
来源:互联网 发布:mac启动盘制作 编辑:程序博客网 时间:2024/05/29 11:52
1、安装VM虚拟机
2、安装REDHAT系统
3、配置IP地址,确定能远程登录
修改vi /etc/sysconfig/network-scripts/ifcfg-eth0文件
ONBOOT=yes
IPADDR=192.168.41.100 //IP地址要查看本机的IP,但是不能相同,例如本机为192.168.41.1,因此设置该虚拟机的IP为192.168.41.100
USERCTL=no
NETMASK=255.255.255.0
4、安装SSH无密码登录
输入命令 ssh-keygen -t rsa 然后一路回车即可
复制到公共密钥中
cp /root/.ssh/id_rsa.pub /root/.ssh/authorized_keys
判断是否成功:
[root@master ~]# ssh localhost判断是否成功:
Last login: Thu Oct 20 15:47:22 2016 from 192.168.41.100
5、安装JDK
修改/etc/profile添加:
JAVA_HOME=/usr/java/jdk1.8.0_111
CLASSPATH=$JAVA_HOME/lib/
PATH=$PATH:$JAVA_HOME/bin
export PATH JAVA_HOME CLASSPATH
6、安装hadoop
从官网下载相关tar包,root用户创建目录
/soft
将hadoop的tar包解压到/soft下
7、配置相关变量
修改hadoop-env.sh 增加JAVA_HOME路径
export JAVA_HOME=/usr/java/jdk1.8.0_111
进入hadoop路径下,输入bin/hdfs namenode -format
编辑core-site.xml
- <property>
- <name>fs.defaultFS</name>
- <value>hdfs://localhost:9000</value>
- </property>
hdfs-site.xml
- <property>
- <name>dfs.replication</name>
- <value>1</value>
- </property>
进入hadoop路径下,执行mv etc/hadoop/mapred-site.xml.template etc/hadoop/mapred-site.xml
然后编辑mapred-site.xml
- <property>
- <name>mapreduce.framework.name</name>
- <value>yarn</value>
- </property>
配置yarn-site.xml
- <property>
- <name>yarn.nodemanager.aux-services</name>
- <value>mapreduce_shuffle</value>
- </property>
进入hadoop路径下,输入bin/hdfs namenode -format
8、启动服务
进入hadoop路径下,输入sbin/start-dfs.sh
进入hadoop路径下,输入sbin/start-yarn.sh9、验证是否成功
启动后访问http://192.168.1.249:50070/ //dfs前台界面
启动完毕后打开http://192.168.1.249:8088/ //yarn前台界面
0 0
- linux RedHat系统版本伪分布式安装hadoop2.5.2
- Hadoop2伪分布式安装
- Hadoop2 伪分布式安装
- Centos 6.5版本的Linux系统下关于hadoop2.4.1伪分布式的搭建
- hadoop2.2.0伪分布式安装
- hadoop2的伪分布式安装
- Hadoop2.6伪分布式安装
- hadoop2.2.0伪分布式安装
- hadoop2.6.0伪分布式安装
- hadoop2.2伪分布式安装
- Hadoop2.6.4伪分布式安装
- hadoop2伪分布式安装步骤
- Hadoop2.X伪分布式安装
- hadoop2.7.3伪分布式安装
- 伪分布式安装hadoop2.8.1
- Hadoop2.7.5伪分布式安装
- Linux安装Hadoop2.4.1和伪分布式部署
- 虚拟机下Linux系统Hadoop单机/伪分布式配置:Hadoop2.5.2+Ubuntu14.04(半原创)
- C/C++可变参数
- 2017年计划
- 英语词根词缀记忆法
- Linux find命令
- java 缓冲池 BufferPool
- linux RedHat系统版本伪分布式安装hadoop2.5.2
- windows 字符
- 使用IntelliJ IDEA 配置Maven(入门)
- View的工作原理(一)
- java已经会的梳理
- 关于微服务和 Java 需要知道的 5 件事
- Get Regexp Matches正则表达取值
- 滑动 点击 下拉 listview时出现黑色的解决方法
- 阿里云短信发送