从零开始,在Docker环境部署Hadoop
来源:互联网 发布:淘宝加盟商怎么找 编辑:程序博客网 时间:2024/05/14 08:19
虚拟机环境:CentOS 7.0
1、安装docker
Docker官方的安装脚本
curl -sSL https://get.docker.com/ | sh
因为网络原因总是安装失败,后来改用国内的源镜像安装
阿里云的安装脚本
curl -sSL http://acs-public-mirror.oss-cn-hangzhou.aliyuncs.com/docker-engine/internet | sh -
2、镜像加速器
还是网络原因,从Docker Hub获取镜像遇到困难,我这里采用了DaoCloud加速器:https://www.daocloud.io/
3、获取镜像
1、获取centos基础镜像
docker pull centos
2、获取Hadoop镜像
这里采用了kiwenlau/hadoop版本的hadoop镜像
docker pull kiwenlau/hadoop:1.0
3、下载Github仓库
git clone https://github.com/kiwenlau/hadoop-cluster-docker
4、创建docker网络
docker network create --driver=bridge hadoop
5、运行Docker容器
cd hadoop-cluster-docker ./start-container.sh
启动了3个容器,1个master, 2个slave
运行后就进入了hadoop-master容器的/root目录
6、启动hadoop
./start-hadoop.sh
7、运行wordcount
./run-wordcount.sh
-------
参考:
[1]、https://yeasy.gitbooks.io/docker_practice/content/install/centos.html[2]、http://kiwenlau.com/2016/06/12/160612-hadoop-cluster-docker-update/
0 0
- 从零开始,在Docker环境部署Hadoop
- 在docker上部署Hadoop
- ubuntu12上docker部署hadoop集群环境
- 使用Docker在生产环境部署应用
- 在生产环境使用Docker部署应用
- 在Docker环境下部署Kafka
- 在Docker环境下部署Kafka
- 在docker环境部署RabbitMQ并使用
- 从零开始安装、编译、部署 Docker
- Docker部署Hadoop集群
- Docker部署Hadoop集群
- 从零开始搭建Hadoop环境
- Hadoop在Windows环境下的部署
- Hadoop在Windows环境下的部署
- Hadoop在Windows环境下的部署
- Hadoop在Windows环境下的部署
- Hadoop在Windows环境下的部署
- Hadoop在Windows环境下的部署
- RocketMQ原理与实践
- 打开word的时候,提示我说:向程序发送命令时出现问题
- 求二叉树的层次遍历
- 全面禁止鼠标右键、FX、ALT、CTRL、SHIFT等
- javascript基础(基本数据类型转换)(六)
- 从零开始,在Docker环境部署Hadoop
- Android系统广播大全
- JS文件中写CSS代码达到共用文件
- win7(64位)离线安装 sphinx-doc
- 练习
- vi
- JAVASCRIPT之导航栏鼠标点击变色特效
- grub2中env绑定hook函数
- java I/O 字节流和字符流的运用