Hadoop Summit 2011: HDFS Federation and Other New Features

来源:互联网 发布:win7万能网络驱动下载 编辑:程序博客网 时间:2024/05/17 03:03

这是Hortonworks公司的Suresh Srinivas(@suresh_m_s)和Sanjay Radia(@srr)在HadoopSummit 2011上关于HDFS的一个topic。

在这个topic中,回顾了HDFS目前的架构以及存在的一些如NameNode单点失败的问题,然后讨论了HDFS Federation的设计思路以及0.23版本的一些新特性。HDFS Federation的主要思路是分布式NameNode,将Namespace进行水平切分,并且引入了BlockPool的概念。该方案的特点是简单,对现有Namenode的改动较少,主要改动在DataNode和一些配置部分。

Hs 2011 submission-87.hw.final
View more presentations from hortonworks

关于HDFS Federation,Suresh Srinivas在今年三月份的HUG中也做过一次分享,在这里一并放出PPT以供参考

Hug – March – HDFS Federation
View more presentations from Yahoo! Developer Network