hadoop的配置安装

来源:互联网 发布:宜人贷 知乎 编辑:程序博客网 时间:2024/05/16 07:50

下载Ubuntu

下载完成后创建hadoop用户,密码为1.

Ctrl+Alt+T打开一个终端,输入如下命令创建hadoop用户:

    sudo useradd -m hadoop -s /bin/hash//创建新用户hadoop    sudo passwd hadoop//选择要设置密码的用户hadoop    1//设置密码:1    sudo adduser hadoop sodu//为hadoop获取管理员的所有权限

下载ssh,配置ssh无密码登录

在终端输入命令:

    sudo apt-get install openssh-server

下载java

运行Teminal终端,进入根目录root并下载java,命令:

    cd ..    cd root    java -version    apt-get install openjdk-7-jre-headless

开始安装java,如下图:
这里写图片描述

下载成功:
这里写图片描述

下载hadoop包

进入官网:http://hadoop.apache.org/,进入Documentation目录,
这里写图片描述

点击current进入如下界面:
这里写图片描述

下拉页面找到连接:
这里写图片描述

点击进入,选择Download
这里写图片描述

点击此连接:
这里写图片描述

选择要下载的镜像:
这里写图片描述

这里写图片描述

这里写图片描述
点击OK,开始下载。下载完成后解压到root/soft/hadoop-2.7.2并进行相对应的配置。

各种配置文件

ect/perfile和hadoop/ect文件的配置

检查配置

  1. 在~hadoop-2.7.2/bin下执行./hdfs namenode format;
  2. 在root/soft/hadoop-2.7.2/sbin下执行
    ./start-all.sh    jps

将出现DataNode, NameNode, NodeManager, ResourceManager四个进程。表明运行正确。

当软件无法正常使用时,检查如下路径下的VERSION文件,修改ClusterID使他们保持一致。
~/log/hadooplog/hadoop/tmp/dfs/data/current和~/log/hadooplog/hadoop/tmp/dfs/name/current

0 0