SDS技术的发展趋势与生态环境 & Ceph投票结果

【编者按】

这周应渠道部门的同事的邀请，去一个VMware合作伙伴那进行交流。不过，令我诧异的是，头一次碰到说，希望站在中立的角度介绍，不要讲产品细节。为了准备这次分享，花了不少时间重新整理素材。

后来因为有事提前离开，据Partner说，大家反馈还不错。下面贴出交流时用到的全文。

最后再公布微信公众号"乐生活与爱IT"上一篇文章：

视频和投票|中国有哪些基于Ceph研发的存储 & 闲聊Ceph & 视频《开源世界里的SDS剖析》，关于Ceph调查的结果。

---Begin---

一、SDS技术的发展趋势与生态环境

目录

一、存储和企业级IT的发展趋势

二、什么是软件定义存储（SDS）

       及SDS实例: VMware SPBM + VMware vSAN

三、SDS的分类（含Server SAN、HCI）

四、SDS的发展：过去、现状与未来；

五 、综述

第1页

存储行业正在发生巨变（分布式存储将占据半壁江山）

到2021年，企业级Server SAN在存储市场的份额将超过传统的外置磁盘阵列

第2页

当前企业级IT的趋势：

1、是虚拟化和云化，对于企业搭建私有云而言，云化的最佳实践，或者落地方式是SDDC(软件定义的数据中心)；

2、存储的趋势是从集中式逐渐转向分布式。在数字化宇宙不断膨胀的过程中，每18个月新增的数据是过去产生所有数据的总和，意味着市场需要更多的存储硬件。从2015年之前的外置磁盘阵列出货容量可以看出端倪，然而增长幅度却呈逐年下降的趋势，甚至在2016年第1季度首次出现负增长。很大一部分原因，就是存储的出货越来越多地转向Server SAN和HCI(超融合架构)了。

3、在很长的一段时间里，混合云是王道。为了让负载能够在私有云与公有云之间，在巨大的孤岛也即几朵公有云之间在线的漂移，采用vSphere这一同构的Hypervisr是一个不错的方法。AWS和VMware宣布在2017年推出，运行在ASW上的VMware Cloud Foundation（简称VCF），VCF中的存储就是vSAN软件。

第3页

IDC在2016年2月预测未来4年，全球HCI市场将以64%的复合增长率增长。而实际发展远超预测的速度，2016年全球HCI市场是2015年的2.1倍，也即增长110%。IDC还认为到2018年，$25k~$250k的中端存储市场（这一区间涵盖了绝大多数用户的存储采购），HCI就会超过外置存储。

按照IDC中国的报告，在最近两年，中国HCI市场，都有2倍甚至3倍的增幅。

第４页

得益于vSphere的用户基数，以及vSphere的可靠性和稳定性，vSAN在全球每周都会新增上百个用户，目前已经有8000多个用户了。实际上，早在2015年8月，vSAN已经跃居HCI市场的榜首，成为拥有最多用户数的HCI产品，并且其迅猛发展的势头，将第二名第三名甩得越来越远了。

不仅用户的私有云选择vSAN，公有云提供商也与VMware合作，包括了AWS，IBM，以及欧洲最大的云服务提供商OVH等。

第５页

看看HCI有多火？ 无论国外和国内，都有许多品牌。IT巨头中，除了IBM(志向已经不在基础架构软硬件)，其他服务器和存储巨头都推出了各自的HCI品牌。例如HDS UCP1000；最近的消息表明，NetApp也试图往HCI靠拢。

第６页

因此，在中国，用户的采购行为或许因此需要调整，将HCI单列为一项。正如十多年前，存储和服务器分开采购，使得用户的选择更加广泛、灵活一样。时至今日，CPU内存相对十多年前有了百万倍的增长，使得服务器在处理业务的同时，大有余力处理数据，也即意味着数据靠近计算，存储和服务器集为一身成为可能，甚至必须。

第7页

软件定义，为云而生

第8页

第９页

2012年８月，VMware在VMworld大会上，在全球首次提出软件定义的数据中心，随后被各大IT厂商、咨询机构所认可。也正在那时，全球首次提出软件定义存储。其三阶段论非常精辟：抽象、池化和自动化。抽象做的是软硬件解耦，逻辑卷与RAID组几块硬盘的解耦，前端控制器WWN的虚拟化，甚至存储控制器的OS从专有硬件剥离出来，可以运行在任何X86服务器上，或者虚拟或者云主机上，都是不同程度的解耦或抽象。只有完成了抽象，物理边界才被打破，继而才能实现虚拟化和池化。现在大多数存储仍处于池化这个层面，下一步需要走向自动化。

第10页

自动化后，才能实现真正云计算的敏捷性和弹性扩展。以vRA为例，通过蓝图，以及存储策略等的结合，可实现即刻交付复杂的三层应用。

第11页

SDS的目标是存储及服务，也就是说，用户提出请求后，就能获得满足其容量、性能、数据保护能力、数据优化能力、成本等要求的存储资源。

第12页

第13页

做为制定存储标准的权威机构 - SNIA(全球网络存储工业协会，一家非盈利组织，旗下超过400多家公司，7000多个成员)，他们认为传统的存储其实是管理员做了控制平面的事情；理想的软件定义存储，应该聪明到，无需网管或者存储管理员介入，当用户提出存储请求时，存储能够自动地提供满足其各项具体要求的存储资源。

第14页

举个例子，VMware软件定义存储的愿景非常宏伟，且极具前瞻性，包括了控制平面-SPBM，以及数据平面-vSAN、Virtual Volumes和云存储。

第15页

VMware软件定义存储的控制平面-SPBM，通过存储策略(也即存储功能，或称数据服务)的组合，来实现存储资源的分配和变更的。在这个过程中，是不需要实现创建好LUN的。

第16页

不同的业务负载可以事先创建好不同的存储策略，创建好后，即可一劳永逸的使用。

第17页

VMware vSAN将打造成为一个通用的存储平台，目前不仅提供块存储访问给vSphere集群上的虚机，还借助合作伙伴如NexentaConnect提供企业级NAS服务，2017年还将引入EMC, NetApp的虚拟NAS。当前的vSAN版本早已支持VIC, Photon等容器技术。将来还将针对Hadoop运行在vSAN上进行优化，支持多种NoSQL数据库等。总而言之，vSAN不仅要为传统的关键应用提供支撑，也要为第三平台，包含云原生的应用提供支撑。

第18页

这一部分的详细阐述，可参考：

【PY原创】SDS 之四：软件定义存储的分类 (v2.0)

第19页

这一部分的详细阐述，可参考：

【PY原创】SDS 之一：为何出现软件定义存储？

第20页

硬件发展迅猛，给软件定义提供了发展空间。

当我们以为软件定义一切，软件定义世界的时候，不要忘了，其实是硬件的超前发展，才使得软件有了定义的可能。例如，CPU和内存的强劲，使得一台服务器既可以处理业务又可以处理数据(包括数据优化如去重压缩等)。只要硬件发展持续迅猛，软件定义就能大行其道。

第21页

第22页

第23页

不仅在国外，在中国，也有越来越多的行业，包括金融、电信等。已经开始规定，除非特别申请，否则默认应该选择以Server SAN或HCI为代表的分布式存储。

第26页

HCI(超融合)   vs.  SDS (软件定义存储)

HCIA(软硬一体机)是SDS漫长征程的一种形态

我认为，SDS是漫长的征程，普及成为理想的SDS，可能要到7、8年后，甚至十多年。而HCI是未来三、五年即将发生的事情。

当我们提到HCI的时候，不能只想到出厂前软硬件就打包好的HCIA（超融合架构设备）。其实HCIS（超融合架构软件），例如vSAN也是一种部署形态。而且预计未来不久，以HCIS这种方式来分析各大厂商的市场份额也会出现。

二三十年前，外置磁盘阵列出现的时候，其兼容性和可靠性也不像今天这么好。HCI的成熟也需要一个过程，刚出现的时候，以HCIA的形态部署，兼容性的工作量相对较少。不过，vSAN依托于vSphere过去发展十多年形成的生态链，能够脱颖而出，支持HCIS的方式部署。同时又提供了DELL EMC VxRail，以及国内浪潮、曙光、广达等HCIA(基于vSAN的软硬件一体机)的方式部署。给用户提供了最广泛和最灵活的选择。

第27页

第28页

做为存储厂商，必须先做好内功，最重要的是稳定性和可靠性，然后增加其他高级功能，也就是逐渐完善数据平面层。但是，随着云化的逐渐深入，不涉及控制平面将会落伍。有Hypervisor的厂商可以自研控制平面，没有Hypervisor的厂商，虽然也可自研，但注定是一条漫长而且费力不讨好，回收周期长的过程。通过向控制平面开放API，是一个不错的选择。

截止到目前，全球范围内已经有超过40多个存储(含vSAN和大多数的外置磁盘阵列，包括老牌阵列和新兴的混合阵列、全闪存阵列)。

根据网上最新的文章，就在昨天（2017年6月23日），新任EMC大中华区总裁谭仲良率领新团队正式亮相的会议上，EMC新品发布中，还介绍了ScaleIO.Next将要支持Virtual Volumes，也即能被VMware SPBM这一控制平面驱动。

如果真是如此，DELL EMC ScaleIO或许将成为vSAN以外，第一个支持VMware SPBM(也即Virtual Volumes)的分布式存储。在去年的时候，我还以为国内有一、两家分布式存储或许能摘得这一桂冠。

第29页

早在2015年，我就认为Hypervisor厂商做控制平面更具有优势。到现在，仍然这么认为。如果看得更远一些，SDS包括HCI的长期竞争，其实是Hypervisor的竞争。

第30页

得控制平面者，得SDS之未来

未来SDS巨头或只有少数几家：

VMware，RedHat，MicroSoft；

AWS，Google，… ，阿里云

但，SDS/HCI 市场会百花齐放

第31页

更多详情可参考：

软件定义存储之未来 - 十年后的存储排行榜会怎样？

比较有趣的是，我和国外的同事交流时，了解到除了微软这个特例之外，并未发现国外的公有云提供商同时提供HCI设备。国内的青云、金山云推出了HCI，是比较有趣并值得关注的。除了这两家之外，不知道是否还有其他公有云提供商已经推出，或者准备推出HCI，欢迎留言。

另外，上面《软件定义存储之未来》这篇文章，发布的时间是2015年7月19日。到今天（2017年6月24日），快两年了。回顾一下当时的预测：

“3年内，EMC将选择与服务器厂商合并（前一阵子传闻EMC与HP在谈合并），或者与某ODM厂商合并。

2年内，国内的联想、曙光、浪潮将自研或者收购SDS存储（Server SAN形态的）。现在基本可以确认的信息是，联想、浪潮正各自在积极地和一些SDS厂商谈合作。曙光的ParaStor并行文件系统已经具有很强的SDS基因，其SDS（Server SAN形态的）的出现指日可待。

2年内，Nutanix将被某IT大厂收购，这会是它最好的归宿，再晚些，也许会重蹈Vilion Memory的覆辙”

回顾一下当时的预测，大多数已经得到验证。尤其令我惊讶的是，在文章发布3个月后，DELL宣布合并EMC。

对于Nutanix，我个人觉得今后的发展非常艰难。其实被收购较之于上市，对于公司的长远发展可能更好。因为，当所有IT巨头，尤其是服务器厂商都有自己品牌的HCI时，Nutanix面临的竞争非常严酷。没有自己的服务器，只有存储的IT厂商，收购HCI，我觉得不是一件很合算的事情。现在，环顾四周，还有哪家服务器厂商可能收购Nutanix呢？ 

实际上，早在2016年第一季度，EMC大力推出VxRail时，并在全球讯速地攻城略地，就能看出端倪。不过和当初的全闪存明星Vilion Memory略有不同的是，Nutanix的产品线更丰富，应该能够坚持更长时间。

第32页

应用定义存储  vs.  软件定义存储

做应用一体机 还是 通用存储？

应用定义属于软件定义

第33页

上述内容和观点，在2016年7月3日的新书发布会上的演讲视频涵盖了一大半。

可参考：

赠书和投票 | 视频《软件定义存储技术与生态》和文档下载

二、Ceph

首先感谢一些朋友的后台留言，统计看来，在中国，推出基于Ceph存储产品的公司应该超过20家。注意，这里还没有包含诸如UnitedStack，海云捷迅，九州云，云图腾，这种在Ceph上实力也很强，但主要专注在OpenStack上的公司。

这次投票的人数达到了历史新高，但坦率说有些异常。下面按序列出投票结果，并附上新增的几家推出了基于Ceph的存储的公司。虽然票数多少不一定反映真实情况，但排名前八的ZettaKit、BigTera、XSKY、RedHat、杉岩、新华三、SUSE、浪潮，誉为国内Ceph存储的第一军团应该还是比较客观的。

---End---

微信公众号平台"乐生活与爱IT"在目前阶段，主要是分享软件定义存储(SDS)，及VMware VSAN相关的文章，偶尔也会分享虚拟化、云计算、大数据，甚至生活类的好文章。欢迎投稿，我的QQ号：9269216。欢迎对SDS感兴趣的朋友，加入软件定义存储讨论 QQ群:122295009，可下载原创的一些文章，及其他有参考价值的文档。可直接搜索群号，或者扫描如下二维码：

同时，欢迎您加入 "开放讨论群-SDS&虚拟化" 微信群，并邀请其他对SDS和虚拟化感兴趣的朋友加入此微信群。可以通过添加如下管理员之一的微信号，建议添加管理员时，告知你的公司名和姓名，方便备注保存。

sdg8848

libo9538

yangzhuan

dts0103

欢迎您通过扫描关注微信公众号：“乐生活与爱IT”。

关注后，可以通过点击左下角的“文章目录”，通过输入三位数（记住！是三位数，目前第一位是0或者1）详细了解如何查看历史文章。

打开 阅读原文 ，是两年前的文章《SDS之五：软件定义存储的现状 – 自动化篇》