Hadoop单机/伪分布式配置(Centos7/hadoop2.6)
来源:互联网 发布:python写文件 编辑:程序博客网 时间:2024/05/01 04:29
1 Hadoop简介
Apache Hadoop是一款支持数据密集型分布式应用并以Apache 2.0许可协议发布的开源软件框架。它支持在商品硬件构建的大型集群上运行的应用程序。Hadoop是根据Google公司发表的MapReduce和Google文件系统的论文自行实现而成。
2Hadoop源码下载
由于hadoop是开源平台代码和源程序可以自由下载,官网提供两种源码,一种是源代码主要是未编译的源代码,可以进行源码学习,自行编译等, 如hadoop2.6的源代码下载地址:(http://www-eu.apache.org/dist/hadoop/common/hadoop-2.6.5/hadoop-2.6.5-src.tar.gz)。另一种是编译好的二进制程序,二进制程序可以直接放在系统上使用。如hadoop2.6的二进制程序下载地(http://www-eu.apache.org/dist/hadoop/common/hadoop-2.6.5/hadoop-2.6.5.tar.gz)。
3安装hadoop平台环境
1)创建hadoop用户,创建hadoop用户的命令为useradd,此命令需要有root用户权限(要知道root用户的密码,或者使用su命令进行权限切换)。
groupadd hadoopuseradd hadoop -g hadoop
2)安装SSH、配置SSH无密码登陆,由于hadoop是分布式平台,所以需要各主机无密码登陆。
3)安装Java环境,这个参考Java安装教程即可,注意配置环境变量。4)安装 Hadoop 2.6,目前使用的版本为Hadoop2.6,下载地址如2.3节所示。
5)Hadoop配置文件配置,配置文件的配置参考这个(http://blog.csdn.net/yangjl38/article/details/7583374)。
- Hadoop单机/伪分布式配置(Centos7/hadoop2.6)
- Centos7.0配置Hadoop2.6.3单机/伪分布式环境
- Hadoop单机伪分布式配置
- Hadoop2.2.0单机伪分布式安装配置
- 【Hadoop入门】Hadoop安装教程_单机/伪分布式配置_CentOS6.4/Hadoop2.6.0
- centos7配置hadoop伪分布式
- Hadoop2.6单机伪分布式搭建
- 虚拟机下Linux系统Hadoop单机/伪分布式配置:Hadoop2.5.2+Ubuntu14.04(半原创)
- Hadoop安装教程_单机/伪分布式配置_CentOS6.4/Hadoop2.6.0
- Hadoop安装教程_单机/伪分布式配置_CentOS6.4/Hadoop2.6.0
- Hadoop安装教程_单机/伪分布式配置_CentOS6.4/Hadoop2.6.0
- Hadoop安装教程_单机/伪分布式配置_CentOS6.4/Hadoop2.6.0
- Hadoop安装教程_单机/伪分布式配置_CentOS6.4/Hadoop2.6.0(转)
- Hadoop安装教程_单机/伪分布式配置_CentOS6.4/Hadoop2.6.0
- Hadoop安装教程_单机/伪分布式配置_CentOS6.4/Hadoop2.6.0
- Hadoop安装教程_单机/伪分布式配置_CentOS6.4/Hadoop2.6.0
- Hadoop安装教程_单机/伪分布式配置_CentOS6.4/Hadoop2.6.0
- Hadoop安装教程_单机/伪分布式配置_CentOS6.4/Hadoop2.6.0
- C# File类的操作
- Elasticsearch中的_source、_all、store和index属性
- FragmentTabHost分隔线隐藏。
- 动态规划解决0-1背包问题
- 高性能队列-Disruptor--简介(1)
- Hadoop单机/伪分布式配置(Centos7/hadoop2.6)
- 稳定性评价
- Docker容器通过独立IP暴露给局域网的方法
- centos 6.5 gcc升级到5.3.0
- UML中类之间的几种关系
- Jenkins简单配置流程
- 杭电ACM2010:水仙花数
- 开篇--开始在CSDN活跃了
- Anaconda环境下对python的配置