基于centos6的Hadoop2.6.5准备与安装
来源:互联网 发布:江苏清华紫光软件集团 编辑:程序博客网 时间:2024/06/05 11:08
下载需要用到的包
下载hadoop的binary包
wget http://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/hadoop-2.6.5/hadoop-2.6.5.tar.gz下载oracleJdk jdk-7u79-linux-x64.tar.gz (jdk1.7.0_79)
- 查看hadoop与jdk的对应版本 http://wiki.apache.org/hadoop/HadoopJavaVersions
开始安装过程
1、卸载centos6自带的openjdk
$rpm -qa|grep java$yum remove java-1.7.0-openjdk-1.7.0.79-2.5.5.4.el6.x86_64$yum remove java-1.6.0-openjdk-1.6.0.35-1.13.7.1.el6_6.x86_64$yum remove tzdata-java-2015e-1.el6.noarch
1.1、安装oracleJdk
$mkdir /usr/local/java$cp jdk-7u79-linux-x64.tar.gz /usr/local/java$tar zxvf jdk-7u79-linux-x64.tar.gz
1.2、配置java环境变量
$vi /etc/profileexport JAVA_HOME=/usr/local/java/jdk1.7.0_79export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jarexport PATH=$JAVA_HOME/bin:$PATH$source /etc/profile$java -version
2、ssh
centos自带或 yum install ssh
3、rsync
yum install rsync
4、创建用户和组
$groupadd hadoop$useradd -g hadoop hduser$id hduser
5、配置hduser用户的ssh无密码登录
$su hduser$ssh-keygen -t rsa$cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys
6、解压
$mkdir /usr/local/hadoop$chown -R hduser:hadoop /usr/local/hadoop$cp hadoop-2.6.5.tar.gz /usr/local/hadoop/$chown hduser:hadoop hadoop-2.6.5.tar.gz$su hduser$tar zxvf hadoop-2.6.5.tar.gz
7、配置hadoop环境变量
$vi /etc/profileexport HADOOP_PREFIX=/usr/local/hadoop/hadoop-2.6.5export PATH=$PATH:$HADOOP_PREFIX/bin$source /etc/profilevim /usr/local/hadoop/hadoop-2.6.5/etc/hadoop-env.sh #这里也再要配置HADOOP_PREFIX和JAVA_HOME
8、测试是否安装成功
$hadoop$./sbin/start-yarn.sh$./sbin/stop-yarn.sh访问http://localhost:8088
0 0
- 基于centos6的Hadoop2.6.5准备与安装
- centos6.5安装hadoop2
- 基于hadoop2.6安装hive与pig的问题
- CentOS6.5下>>hadoop2.6.2版本的>>Mysql数据库的安装与配置
- centos6.4安装hadoop2.2.0
- centos6.7安装Hadoop2.7.3
- CentOs6.7 + hadoop2.8 安装
- centos6.6 /centos7安装Hadoop2.6.5分布式集群
- 基于hadoop2.6+java6+centos6.5 64位+VMware9 源码安装hadoop沙盘环境(一)
- centos6.5 x86_64系统安装docker之前做的准备
- centos6的安装与配置
- centos6的安装与配置
- centos6下安装部署hadoop2.2
- Centos6.5 x64 安装hadoop2.2.0
- Centos6.5源码编译安装Hadoop2.5.1
- centos6下安装部署hadoop2.2
- 虚拟机 CentOS6.6 hadoop2.6.0 集群安装
- Centos6.X安装单机Hadoop2.6
- Java类加载器
- 谈我对网络协议的理解过程:
- Redis 订阅功能实现
- Java_JVM参数-XX:MaxDirectMemorySize 与 两种 ByteBuffer: heap,direct ByteBuffer
- Linux与Windows的文件共享
- 基于centos6的Hadoop2.6.5准备与安装
- nginx+tomcat+memcached负载均衡集群搭建(一)
- 伪装类
- 栈的压入弹出序列
- LeetCode 343. Integer Break 题解
- 线性代数相关概念
- BZOJ 4320 ShangHai2006 Homework
- 详解 pkg-config 作用
- MySQL中SYSDATE()和NOW()的区别