Hadoop任务即将可以运行在Docker容器中
来源:互联网 发布:破解版小说软件 编辑:程序博客网 时间:2024/05/29 09:14
作者 马德奎 发布于 2014年9月3日 |
近日,Gigaom高级编辑Derrick Harris发表了一篇文章,题为《Hadoop任务即将可以简单又安全地运行在Docker容器中》。文章开头写到,Hadoop初创企业Altiscale将把Docker变成运行Hadoop任务的一个合适环境作为自己的使命,而且已经接近完成。现在,其中最大一项待解决的问题是网络安全。
Raymie Stata是前雅虎CTO,同时也是Artiscale这家Hadoop即服务初创企业的创始成员之一。他和另一位工程师Dinesh Subhraveti向Harris介绍了他们的这项工作。
据Stata介绍,他们正与Docker社区紧密合作,推动Docker与YARN集成。他认为,这对任何需要应对多租户Hadoop环境的企业而言都很重要。Docker不仅可以提供一种快速、标准的方法向YARN部署应用程序,还可以实现应用程序之间的隔离。这在安全和性能方面都很重要。下面是Docker容器运行应用程序的示意图:
不过,Subhraveti指出,在实现Docker与YARN的集成之前,需要完成一项重大的改进,就是将用户命名空间引入Docker,从而确保具有root级权限的应用程序不会危害主机,使它不安全或者降低其它容器的性能。这项工作可能要到今年年底才能完成,到那时候,Hadoop用户应该就能够在YARN上运行Docker容器,并且不用担心安全问题了。
最近一段时间,关于Docker的讨论比较多。对Docker感兴趣的读者,可以阅读一下Gigaom前段时间发表的另一篇文章《Docker如何抓住开源的理想时机成为云端的宠儿》。
- Hadoop任务即将可以运行在Docker容器中
- 在docker容器中运行zookeeper
- 在docker容器中运行hello world!
- 在Docker Container中运行Hadoop程序
- 在Docker中运行Hadoop+Spark集群
- 在docker容器中运行或一键运行GourdScanV2
- 为什么不需要在 Docker 容器中运行 sshd
- 如何在 Docker 容器中运行 Kali Linux 2.0
- 如何在docker容器中运行一个程序
- 如何在生产环境中运行Docker容器
- 在Docker容器中运行Spring Boot应用
- 在容器中运行Jenkins部署主机中的docker应用
- Docker中运行mysql容器
- 利用 Spring Boot 在 Docker 中运行 Hadoop
- docker 配置可以运行spark的容器并运行
- docker学习2|在容器中部署nginx并保存、运行容器
- Docker容器中运行一个Apache服务器
- Docker实践 - 安装Docker并在容器里运行tomcat
- 使用栈实现整型表达式的计算
- 重置Visual studio 2012环境
- python核心编程笔记(3)
- 获取iOS设备名
- java多线程
- Hadoop任务即将可以运行在Docker容器中
- [gfirefly深入解析]--总体架构及demo讲解
- 应用 Valgrind 发现 Linux 程序的内存问题
- 将数据中的元素都向前移动一个位置,最后一个元素的值是原来第一个元素的值,然后输出这个数组。
- 牛腩新闻发布系统——触发器
- 常见默认端口号
- 递归树求取递归的时间复杂度
- 素数(南阳169)
- java中如何在ajax发送参数的时候,参数以数组的方式传递到后数组台