Hadoop on Ubuntu 实践一：单机配置

来源：互联网发布：肯德基网络市场调研编辑：程序博客网时间：2024/06/05 03:42

声明：Hadoop相关资料，最好参考官方文档，根据需要，选择参考不同版本：

当前版本，http://hadoop.apache.org/docs/current/

版本列表，http://hadoop.apache.org/docs/

本文采用的是Hadoop版本为0.20.2，系统为Mac OS X 10.7.5。

0. 下载Hadoop

https://archive.apache.org/dist/hadoop/core/hadoop-0.20.2/

1. Java环境搭建:

略

2. 将Hadoop解压缩：

$ tar xvzf hadoop-0.20.2.tar.gz

3. $ vim hadoop-0.20.2/conf/hadoop-env.sh，配置JAVA_HOME：

添加双引号内部分，“export JAVA_HOME=/usr/lib/jdk1.7.0_07”

4. 为Hadoop修改环境变量，(1)、(2)任选一：

参考http://www.cnblogs.com/xiaofengkang/archive/2011/11/26/2264458.html

(1) 全局修改：

$ vim /etc/profile

添加双引号内部分，“/home/hadoop/桌面/work/hadoop/hadoop-0.20.2/bin”

注：你可能需要$source/etc/profile，该配置才能生效

(2) 用户修改：

$ vim ~/.profile

添加双引号内部分，”export PATH=$PATH:/home/hadoop/桌面/work/hadoop/hadoop-0.20.2/bin“

注：你可能需要$source ~/.profile，该配置才能生效

测试1：

$ hadoop version

看到以下内容则表示配置成功：

Hadoop 0.20.2Subversion https://svn.apache.org/repos/asf/hadoop/common/branches/branch-0.20 -r 911707Compiled by chrisdo on Fri Feb 19 08:07:34 UTC 2010

测试2：

$ cd hadoop-0.20.2

$ mkdir input

$ cp conf/*.xml input

$ hadoop jar hadoop-*-examples.jar grep input output 'dfs[a-z.]+'

$ cat output/*

看到以下内容，则表示配置成功：

1dfsadmin