Hadoop环境的配置
来源:互联网 发布:奥飞数据与奥飞娱乐 编辑:程序博客网 时间:2024/06/05 09:56
首先Hadoop运行在Linux之上,所以我们需要有虚拟机去虚拟一台Linux,笔者这里是Centos6.7系统。 创建虚拟机的过程就不多说了。
首先是配置虚拟机与物理机的网络关系。网络方面的配置笔者之前的博客有讲到。那篇博客的名字叫(VMware虚拟机 客户机是Linux的情况下客户机ping VMware网关,ping不通),里面详细介绍了如何配置网络。
当我们登入一台Linux机器命令前面一般都是这样的------> [root@localhost]# (后面接着是一堆的shell命令)
我们要把域名localhost改为hadoop。
于是就敲入 vim /etc/sysconfig/network
将HOSTNAME=hadoop
再有一个就是修改域名和ip地址间的映射。
敲入命令 vim /etc/hosts
添加途中的一条记录
为了方便起见,可以将Linux的防火墙关闭掉,以防止造成不必要的麻烦。
敲入 service iptables stop
再敲入 chkconfig | grep iptables
最后敲入 chconfig iptables off 彻底关闭掉防火墙。
然后再就是如果想进行Hadoop配置,首先需要LInux机器上已经安装了jdk。
jdk的安装笔者就不再说了。
笔者这里有hadoop的安装包 ---------> hadoop-1.1.2.tar.gz
运行命令 tar -xzvf hadoop-1.1.2.tar.gz
然后为了简单起见 将文件夹重命名下 运行命令 mv hadoop-1.1.2 hadoop
配置环境变量。
敲入命令 vim /etc/profile
修改如下
cd 到 /usr/local/hadoop/conf 目录下。
配置4个文件 hdfs-site.xml mapred-site.xml hadoop-env.sh core-site.xml
首先配置hadoop-env.sh 文件
敲入命令 vim hadoop-env.sh
修改为如图所示。
接着配置core-site.xml
配置文件的内容如下:
紧接着配置 hdfs-site.xml 文件
内容如下:
最后配置mapred-site.xml文件
内容如下:
配置完成就可以启动了。
敲入命令 start-all.sh 命令就可以启动了。
打开centos的图形界面 再打开firefox 在地址栏里 敲入hadoop:50070
看到如下界面就是hadoop环境配置完成。
- hadoop的环境配置
- Hadoop环境的配置
- hadoop环境的配置
- hadoop环境的环境配置
- HADOOP 开发环境的配置
- Hadoop生产环境的配置
- ubuntu下hadoop环境的配置
- Ubuntu配置hadoop的eclipse开发环境
- Hadoop的环境配置与注意事项
- 生产环境下的hadoop 配置实战
- mac下配置eclipse的hadoop环境
- Linux.配置Hadoop环境的一些问题解决
- Hadoop生产环境的配置札记
- Ubuntu下Hadoop环境的配置
- hadoop环境配置出现的问题
- hadoop学习笔记<二>----hadoop集群环境的配置
- [Hadoop]基于Eclipse的Hadoop应用开发环境配置
- hadoop学习2 记录配置hadoop环境的那些坑
- java中的闭包
- 1/7 = 0.142857142... 是个无限循环小数。 任何有理数都可以表示为无限循环小数的形式。 本题目要求即是:给出一个数字的循环小数表示法。 例如: 输入: 1,5 则输出: 0.2 输入
- 事务和锁
- 链表C++实现
- spring mail 发送邮件
- Hadoop环境的配置
- java.lang.IllegalStateException异常产生的原因及解决办法
- RPC中Hessian请求转发
- 知识积累:.length和.length()
- ListView中的item中的Onclick事件的优化
- 强悍的 Linux —— 强悍的 ls
- 标识符和关键字
- Delphi表格控件DBGridEh全属性设置详解 最全的属性设置说明
- 整数划分