基于Docker快速搭建Hadoop集群

来源:互联网 发布:企业培训网络课程设计 编辑:程序博客网 时间:2024/05/01 22:44

### 1. 引言

开发环境使用Ubuntu Kylin16.04的系统,通过vmware-install.pl命令执行安装一直显示安装成功,但是却无法使用。最后通过使用apt-get找到一个安装包成功的解决了问题。命令如下,执行成功后,需要重新启动一下:

apt-get install open-vm-tools-desktop fuse

reboot

安装好vmware-tools之后就可以实现屏幕分辨率的自适应和文件的自由拖动。


### 2. docker安装集群

集群构建主要参考的是Github上面的[hadoop-cluster-docker](https://github.com/kiwenlau/hadoop-cluster-docker)


简单说步骤主要分为:

1. 下载Docker镜像

> sudo docker pull kiwenlau/hadoop:1.0


 2. 下载GitHub仓库

> gitclonehttps://github.com/kiwenlau/hadoop-cluster-docker

3. 创建Hadoop网络

> sudo docker network create--driver=bridge hadoop

4. 运行Docker容器

> cd hadoop-cluster-docker
> ./start-container.sh

运行结果

start hadoop-master container...
start hadoop-slave1 container...
start hadoop-slave2 container...
root@hadoop-master:~#
看到@hadoop-master说明已经进入到hadoop-master的容器,此时可以进行操作
如果不小心退出docker容器,可以根据以下命令重新进入容器
> sudo docker attach hadoop-master 


0 0
原创粉丝点击