【圣诞特辑】2018年的存储圈是什么样?

随着物联网,人工智能和多云三管齐下延迟了公有云碾压本地部署的进度,因此,2018年存储的整体形势不算太糟糕。营收和产能都有所增加,同时潜在问题也开始减少。

由于新技术针对闪存有望增加层数和QLC(4位/单元),针对磁盘有辅助磁记录技术,容量有所提升。存储级内存离我们越来越近,NVMe-oF来了,可组合系统也在强势蓄力。超融合系统则正在加紧收割市场占有率。

2018年的存储圈有大型收购案,有公司退场。四大存储巨头——戴尔EMC,HPE,IBM和NetApp仍表现良好,许多初创公司也在发展,但有一两家公司进行了重组。

让我们先从公有云的进度迟滞开始整理,然后看介质,阵列和文件系统发展,最后是收购,重组和退场。

公有云的打压力度降低了

亚马逊,微软Azure和谷歌以风卷残云之势意图彻底碾压本地部署存储。但随着物联网边缘计算的崛起,当公有云遇见产生物联网数据的设备时,这场鲸吞之战很快就被阻断了。

边缘设备会产生大量数据。飞机,船只和自动驾驶汽车,其传感器每小时可以检测出数十万个可能需要立即响应的事件。由于网络带宽限制,要传输到公有云上的数据太多,因此需要很长时间来接收,分析,响应并将其发送回边缘设备。

实际上,小巧复杂的边缘设备需要有自己的微型数据中心和存储。我们可以看到数据生成的分支机构,并将它们定义为“互联网边缘计算的场地”。超级存储分支机构则是边缘计算场地,并且需要自己的本地部署IT。

边缘计算也需要机器学习和人工智能技术,实时分析和分类存储本地生成的数据以便进行本地决策。我们可以将过滤后的结果传输到公有云进行集中分析,归档等,因此在本地部署和公有云世界之间建立了良好的合作关系。

第三个因素是多云,即公有云和私有(本地部署)云的组合,客户通过使用两个或更多供应商来避免供应商锁定问题,通常通过一个中央线路集成器进行协调。而AWS明显意识到自己需要本地部署用于海量数据收集,于是推出了Snowball设备,而Outpost是研究的结果。

今年11月份,亚马逊的Outpost发布,类似微软Azure Stack,这是今年亚马逊的一个分水岭。现在甚至连亚马逊都支持多云了。

总体而言,许多数据中心已成为互联网边缘数据中心,这意味着本地存储的“钱”途依然在发光。

非易失性存储介质

想站在非易失性存储技术前沿就要有——分层,QLC和存储级内存。

使用64层3D TLC闪存SSD占主导地位,在三星发布90+层SSD的刺激下,几乎所有制造商都宣布计划转向96层闪存,以此来增加50%的产能。

中国长江存储的NAND代工厂称其想要完全绕过96层阶段,从64层闪存直接跳转到128层。这将使其能够赶上最终会将96层转向128层NAND的英特尔,美光,SK海力士,东芝和西部数据。

控制器和NAND技术的发展足以支持QLC技术。QLC比TLC的写入耐久性更低,因此更适合读取密集型工作负载,例如快速访问归档。

今年2月份,美光发布了QLC SSD,5月份发布5210 ION企业级SSD,而西部数据则在7月份发布了96层闪存,三星和英特尔在8月也相继推出96层闪存。

采用QLC闪存的SSD可能会影响近线磁盘驱动器的销售,但磁盘容量改进应该会为这三家HDD制造商带来一定的价格优势。还有SSD容量增加的范例,比如今年二月份,三星宣布投产31TB容量的SSD。

存储圈里的分分合合

2018年的闪存市场发生了两个大事件,第一是美光和英特尔决定拆伙它们的IMFT(英特尔美光闪存技术)代工业务,并分别制造和研发3D NAND和3D XPoint。

其次,东芝以180亿美元价格把闪存业务卖给了贝恩资本主导的财团,主要是为了维护自身在东芝和西部数据的闪存代工合资企业的利益。希捷是财团成员之一,现在获得了芯片供应“保证书”。

存储级内存

英特尔还在坚持将Optane推向市场,思科和联想已经将Optane用于某些服务器。12月底,Liqid将Optane SSD添加到了其可组合系统服务器组件中。

HPE升级了3PAR阵列操作系统来使用Optane SSD存储级内存缓存,它还支持Nimble阵列。戴尔EMC明年将增加Optane存储级内存支持。E8的NVMe-oF软件也支持Optane。

NetApp推出了由Optane支持的MAX Data服务。8月份,英特尔还正式推出了Optane DIMM,提供350纳秒的平均读取延迟。这将有助于提高服务器OEM对Optane采用率。

未来存储行业将会掀起一波存储级内存浪潮,目的是让服务器数据访问速度更快。三星的Z-SSD可以站出来竞争一下。

磁盘的世界

2018年,磁盘容量逐渐攀升,焦点是3.5英寸近线驱动器。这些产品从10TB增长到14TB,三家制造商都提供这一系列驱动器用于台式机,数据中心,NAS和监控。

西部数据甚至推出了一款15TB的叠瓦式驱动器,可是主流驱动器的下一个容量级应该是16TB。而更高的容量意味着单位容量存储更小的比特位,而且保持磁极稳定的唯一方法是使用不同的记录介质,这些记录介质需要通过读/写磁头来改变极性。

希捷采用了热辅助磁记录(HAMR)技术,并且正在测试16TB HAMR驱动器。西部数据和东芝正在使用微波辅助磁记录(MAMR),明年应该会有驱动器进行测试。

2019年,我们应该会看到MAMR和HAMR驱动器问世,容量为16-20TB。

2018年期间,希捷透露,其将在明年推出采用多执行器技术的14TB驱动器。每个盘片采用两个读/写磁头来增加磁盘驱动器的IO速率。现在我们看到今年的幕后技术开发应该会在明年提供20TB以上的驱动器,以及具有更高IO速率的驱动器。

还有,随着SSD吞食笔记本,台式机,2.5英寸和3.5英寸快速数据中心磁盘的市场,厂商对磁盘的制造投入正在收缩。例如,西部数据在7月关了一家吉隆坡的工厂。

磁盘和闪存阵列

磁盘阵列在一年里增加了容量和速度。戴尔EMC的Unity和SC阵列速度有明显提升。

阵列开发还有另外两个主题——NVMe-oF和分析。

许多阵列已经支持NVMe SSD。很多初创公司如E8,Excelero和Pavilion提供NVME-oF访问,通过网络链接到外部阵列来提供接近PCIe的直连附加存储速度;想想。

NVME-oF依赖于数据中心级以太网或InfiniBand进行有线传输。但NVMe-over-TCP和NVMe-over-FC一样都提供了安装基础SAN来升级到NVMe-oF的方法,无需添加InfiniBand或无损耗以太网。

NetApp宣布支持Fibre Channel NVMe。IBM的Flash System阵列支持端到端的NVMe。Pure Storage和HPE则都在增加NVMe-oF支持。NVMe-oF基础工作今年已经基本完成,主流采用将从明年开始。

第二个主题是预测分析,可用于优化本地部署阵列的操作,例如Nimble的InfoSight技术。而HPE收购了Nimble,现在已将InfoSight推广到其3PAR阵列上。

Pure Storage也添加了预测分析功能。超融合系统供应商都在添加该类功能。很快预测分析将成为所有企业存储阵列供应商竞争的一个筹码。

新的阵列供应商

闪存芯片和磁盘驱动器供应商东芝与西部数据进入了驱动器阵列业务。东芝推出的Kumoscale软件,以虚拟方式实现对NVMe闪存驱动器的光纤访问能力。即将一台服务器机架接入一套全闪存驱动器阵列,KumoScale软件在服务器中运行,对SSD进行虚拟与抽象化处理,从而将其转化为单一容量巨大的SSD。

西部数据变得越来越主流。其Ultrastar Serv60+8是一款混合4U存储服务器,配置了两个Xeon控制器,60个3.5英寸磁盘驱动器托架和8个2.5英寸SSD托架。利用12TB充氦磁盘可以存储高达780TB容量,并且一旦14TB磁盘和7.68TB SSD可用,就可以实现900TB容量。

西部数据还推出了两款二级或归档磁盘存储阵列——ActiveScale P100和X100,此外还有旗下HGST收购的Amplidata对象存储的v5 ActiveScale OS。

不过,西部数据是否会成为一家重要的阵列供应商和可组合系统供应商尚有待观察。因为销售阵列和系统和向OEM,VAR以及消费者出售驱动器有很大的不同。

文件系统

IBM的Spectrum Scale在销售额和基准测试上都是大赢家,同时Elastifile和WekaIO等初创公司也各自推出了自身的产品。

HPC供应商Panasas宣布推出更新更快的软件(PanFS),并将专有技术转为商用硬件,为可能的纯软件版本发布或PanFS的云实例化做好准备。Qumulo提升了自身文件管理器和软件的速度。谷歌发布了自己的云文件存储。基本上,在2018年文件存储发展迅速。

对象存储

对象存储市场今年相对平静。供应商继续增加了S3接口以及文件级访问。 Cloudian和Scality拿到了新的融资并加强了与主流存储供应商的合作关系。

不过,我们看到了全闪存对象存储节点的开端,未来其将会有更高的性能。在今年对象市场几乎可以称的上是一个成熟了的市场。

备份和数据管理

Veeam发展最为迅猛,其次是Acronis,Cohesity,Rubrik等公司,这也导致传统供应商Commvault和Veritas陷入了困境。

备份被视为二级存储的“生成器”;非结构化数据文件除了提供数据保护还可以设法做更多的事情。我们都知道二级存储不止于备份,不过一些供应商没啥兴趣从数据保护向数据管理发展,例如Veeam。

但所有的二级存储公司现在都在从事数据管理业务,包括Actifio,Cohesity,CTERA,Igneous,Komprise和Rubrik。甚至Scality也有它的Zenko数据管理。

备份公司正慢慢转变为数据管理公司;这一点Commvault和Druva就是见证。

所有这些数据管理器都凭借构建元数据仓库来描述它们所关注的非结构化数据文件,然后使用仓库来为测试和开发人员提供数据副本,以及归档,分析,数据保护,安全性,治理和生命周期管理服务。

备份供应商得益于客户越来越愿意与多家供应商合作,它们通常会为特定备份工作负载选择适用的产品。

终于到了收购part

科技网站The register整理出了2018年的19次收购案:

2018年1月份

微软收购Avere;

Barracuda收购PhishLine;

Veeam收购N2WS;

2月份

Rubrik收购DatosIO;

Carbonite收购Mozy;

5月份

Nutanix收购Netsil;

Kaseya收购Unitrends;

谷歌收购Velostrata;

6月份

贝恩资本为主导的财团以6100亿美元的价格收购了东芝闪存业务;

7月份

日立Vantara收购REAN;

8月份

Nutani收购Windows桌面和应用程序云交付领域领先供应商Mainframe2;

Pure收购StorReduce;

DDN以6000万美元收购Tintri资产;

StorCentric收购Drobo和Nexsan;

苹果收购Akonia Holographics;

10月份

Kaseya收购Spanning;

重整旧河山的Violin收购X-IO;

11月份

HPE收购BlueData;

DDN接手了英特尔旗下的Lustre文件系统业务,并把它的名字再次改回英特尔收购前的名字——Whamcloud;

IBM以340亿美元收购红帽,但它本身并不是存储。

以上大部分收购都可以称为买入,收购技术型公司可以帮助收购方增强其市场地位,如Nutanix和Netsil,或者有底气进击邻近市场,如Rubrik和DatosIO。

贝恩集团能成功收购东芝的闪存业务是特例,因为东芝是为了还负债,不是自愿的。

2018年退场的存储公司

在2018年退场的存储公司非常少。值得注意的是,全闪存和混合阵列供应商Tintri在IPO后股价大跌,于是破产了。但今年9月,HPC存储供应商DDN为了进入企业级存储阵列市场,以6000万美元的价格收购Tintri。

2018年谁经历了重组和CEO变更事件

有三家公司——Commvault,昆腾和Veritas正在以修正失败或次优业务模式进行重组。

Commvault正在改变其成本结构和业务模式,简化产品,重新推动渠道推广以并转向订阅定价。

昆腾发现自身的StorNext横向扩展文件系统管理软件没能获得足够的收入来抵消磁带和重复数据删除磁盘阵列产品。

2018年6月,Jamie Lerner被任命为CEO,这是昆腾在八个月内换的第四位CEO。这里有激进投资者VIEX的干预加上2017年3月面临纽约证券交易所的退市威胁,一个月后通过反向股票分拆回避了,然后同年11月,原昆腾CEO Jon Gacek离职,然后开始换高管。

该公司还在调查会计违规行为,并且提交了美国证券交易委员会季度研究报告。现在Lerner制定了垂直市场战略,将StorNext产品系列与娱乐和媒体,石油天然气和汽车等市场中的工作流阶段和应用程序相结合。

Veritas正致力于削减成本并实现盈利阶段,有重组和裁员。

总结

人工智能驱动的分析趋势正在崛起,互联网边缘设备潜在的巨大数据生成能力,以及公有云对本地存储打压变弱表明了存储行业的健康状况良好,相信明年存储市场会变得更加强大。