Hadoop程序开发之——hadoop安装
来源:互联网 发布:苏联解密档案数据库 编辑:程序博客网 时间:2024/06/05 14:48
安装步骤:
1、到官网下载最新的稳定版本hadoop。
当前为2.7.2.
格式为.tat.gz的压缩文件。
这是编译好的二进制文件。
另一种包含src的是源文件,需要编译才能使用。
下载时,建议下载对应的mds文件。便于后面对比下载的hadoop文件是否完整。(根据md5值对比)
2、解压到制定目录:sudo tar -zxvf hadoop.***.tar.gz -C /usr/local。
3、重命令文件夹:mv ./hadoop2.7.2 ./hadoop。
4、修改文件权限:sudo chown -R
扩展知识:
chown是更改文件为指定用户或者群组的命令。
格式为: sudo chown 用户名/ID:群组名:ID 文件名。详见参考文章1.
例如:sudo chown -R hadoop ./hadoop
sudo chown -R root:rootgroup ./hadoop. 更改文件hadoop为root用户,rootgroup群组。
5、配置.bashrc文件。
输入命令:update-alternatives --config java。
得到已安装oracle JDK的安装路径,例如:/usr/lib/jvm/java/bin/java。如果有openJDK路径,自动忽略。
取JDK安装的根目录:/usr/lib/jvm/java
打开.bashrc文件(.bashrc是根据用户的,所以在用户的目录)。.bashrc文件位于$HOME/hadoop下。用ls -a命令可以查看到;用图形界面gome打开目录,按ctrl+h也能显示。
命令方式打开(方法一):sudo gedit ~/.bashrc打开。
图形界面方式打开(方法二):gnome打开/home/hadoop后,ctrl+h显示出隐藏文件,双击.bashrc即可编辑。
添加如下内容:
#HADOOP VARIABLES START
export JAVA_HOME=/usr/lib/jvm/java
export HADOOP_INSTALL=/usr/local/hadoop
export PATH=$PATH:$HADOOP_INSTALL/bin
export PATH=$PATH:$HADOOP_INSTALL/sbin
export HADOOP_MAPRED_HOME=$HADOOP_INSTALL
export HADOOP_COMMON_HOME=$HADOOP_INSTALL
export HADOOP_HDFS_HOME=$HADOOP_INSTALL
export YARN_HOME=$HADOOP_INSTALL
export HADOOP_COMMON_LIB_NATIVE_DIR=$HADOOP_INSTALL/lib/native
export HADOOP_OPTS="-Djava.library.path=$HADOOP_INSTALL/lib"
#HADOOP VARIABLES END
6、使配置的环境变量生效。
命令:source ~/.bashrc
7、hadoop安装结果检查。
输入命令检查hadoop是否安装好:
进入hadoop bin目录:cd /usr/local/hadoop/bin/
版本查看命令:hadoop version.(也可直接在命令行输入,不需要进入目录)
如果正确显示版本信息,例如:Hadoop 2.7.2。表示安装成功。
参考文章:
1、http://www.cnblogs.com/peida/archive/2012/12/04/2800684.html
- Hadoop程序开发之——hadoop安装
- hadoop程序开发之——JDK安装
- hadoop程序开发之——ssh服务安装、启动
- hadoop程序开发之——常用linux命令小结
- hadoop程序开发之——单机配置
- hadoop程序开发之——伪分布式配置
- hadoop安装之-hadoop
- Hadoop之MapReduce程序开发流程
- Hadoop之——伪分布安装
- hadoop学习之hadoop安装
- Hadoop(一) 之 安装Hadoop
- hadoop之虚拟机安装hadoop
- Hadoop之Hadoop安装详解
- hadoop搭建之hadoop安装
- hadoop程序开发实践——简单程序
- hadoop集群搭建——hadoop安装
- Eclipse开发Hadoop程序
- Hadoop安装及开发
- WebService机制和使用《一》
- POJ:3061 Subsequence(尺取法)
- LeetCode——054
- java毕向东听课笔记25(集合框架-Set集合TreeSet)
- 专题二 1015
- Hadoop程序开发之——hadoop安装
- DeepLearning论文笔记(一):What is the Best Muti-Stage Architecture for object Recognition
- 转载 Java 实现导出excel表 POI
- 折半插入排序
- 如何判断一个动作是深蹲还是硬拉?
- 我是一个Java class
- 二叉树坐标计算
- LeetCode-321. Create Maximum Number
- 修改MojoWeixin 只保留用户name 取消群昵称