hadoop环境的配置

来源:互联网 发布:新田惠海 知乎 编辑:程序博客网 时间:2024/06/06 14:04

1.将JDK开发包上传给Linux系统,直接利用ftp传送即可:

  如果现在没有开发包,则可以使用“wget  地址”实现JDK的下载。

2.随后将上传的jdk文件进行解压缩处理:

此时建议将此内容直接保存到“/user/local”目录中:tar xzvf jdk文件 -c /user/loacl

3.在"/user/local"目录下进行列表查看

4.将jdk的文件名变短:mv jdk文件名/ jdk  将文件名改为了jdk

5.随后进行环境文件进行配置:vim /etc/profile

      在文件最后进行配置:export JAVA_HOME = /user/local/jdk

export PATH=$PATH:$JAVA_HOME/bin;

export CLASS_PATH=$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar

6.让修改的环境变量即可生效:source /etc/profile

7.下载解压Hadoop的开发包:tar xzvf hadoop-2.72.tar.gz -c /usr/local

8.重命名:mv hadoop-2.7.2/ hadoop

9.配置:export HADOOP_HOME=/USER/LOCAL/HADOOP

EXPORT PATH=$PATH:$JAVA_HOME/BIN:$HADOOP_HOME/BIN:$HADOOP_HOME/SBIN

10.因为Hadoop依赖jdk,找到文件路径:/usr/local/hadoop/etc/hadoop/hadoop-env.sh

编辑Hadoop-env.sh 修改export JAVA_HOME=/user/local/jdk

11.测试自带的Wordcount:1).在Hadoop目录下创建一个input的目录:mkdir input

2).  echo +单词+ >input/info.txt

12.测试:结果保存到output目录下(回到input的父目录下执行以下语句)




原创粉丝点击