NAS存储趋势盘点:集群化发展御海量数据

行至2010年岁末,各种新闻事件充斥我们的眼球:韩朝对峙的炮声仿佛回荡在我们的耳边;上海胶州公寓大火的逝者也仍然被我们铭记;iPAD与iPhone4的发售引发了空前的抢购热潮;芙蓉JJ已经瘦到100斤并获得“互联网特殊贡献奖”,凤姐也去了美国……在这一系列互联网热点新闻事件的背景下,我们还将面对通货膨胀物价上涨的压力,和一个号称是“千年极寒”的严冬……

一年的时间在我们的社会生活中仅仅只能算沧海一粟,但对技术创新极其活跃的存储产业来说,却足以给未来带来影响深远的改变……为便于广大网友了解存储领域技术创新的路线图以及未来趋势,IT168推出了“年终盘点及新年展望”的系列报道,通过回顾存储领域一年中的重点产品与事件,总结今年的热点技术以及产品,勾勒出存储技术进化的基本脉络,进而描绘产品创新的未来趋势。

本文将盘点2010 NAS网络存储领域所显示的一些技术趋势,通过NAS网络存储技术趋势的回顾与总结,了解2010年NAS网络存储产品的发展方向,帮助用户采购符合趋势的产品。

NAS集群化发展

根据Gartner的统计,2008年,基于文件的存储系统容量出货量以微弱的优势首次超过了基于块的存储系统容量的出货量。根据以上趋势,到2012年,基于文件的存储系统容量将占到总容量的70%。而IDC也同时预测,鉴于基于文件类型的非结构化数据的增速极快,到2012年,全球存储市场的总出货量中将有80%的容量被文件级数据所覆盖。

随着文件数量不断上升,逐渐达到了现有的NAS网络存储可控制的边缘,许多公司在管理他们的网络附加存储设备(NAS)上都遇到了不同程度的问题。然而,类似集群NAS系统的技术被设计用于解决大量NAS系统的问题,同时总体上也大大简化了NAS管理。NAS集群领域频繁发生的并购事件也从侧面例证了该市场的火热。

在过去几年中,传统的存储厂商都积极进军Scale out NAS市场。2009年,惠普收购集群文件系统厂商IBRIX,并在今年推出融合IBRIX技术的新产品。2009年7月,一直以OEM业务为主的LSI公司收购了Scale out NAS厂商ONStor。2010年,戴尔通过收购Exanet也进入到集群文件系统市场。IBM于今年4月发布新的集群文件系统SONAS。HDS公司与BlueArc达成了OEM协议,开始销售高端NAS产品。最近的收购案则是2010年底,EMC收购集群NAS厂商Isilon,意图补齐Scale out NAS产品线。

在国内存储厂商中,也不乏一些钟情于集群存储的厂商,像九州初志、蓝鲸、龙存等,都在这方面开展了研发和应用推广工作。

从技术上说,集群NAS具有着高性能,高容量,单一命名空间的优势,性能能够随容量线性增长而不必过于顾虑NAS机头的性能限制,因此其在很多文件级的应用中,比如数据文件检索拥有着极大的优势。不过,相对于传统的NAS产品,集群NAS同样也存在应用成本较高、用户需求较少的弱点。

如今的集群存储市场上,独立的厂商已经寥寥无几,这些大厂商的加入,一方面固然看到了集群NAS的良好市场前景,另外一方面也加剧了集群NAS领域的竞争。随着应用对系统性能需求的逐步增加,以及数据中心应用的广泛发展,会有越来越多的企业考虑到集群NAS系统的优势,因此,从长远方向来看,集群NAS发展的触角将会越来越广,越来越深远。

对象存储成新宠

IDC在《2010数字宇宙研究》报告中指出:在2010年,数字宇宙(指代由全球所有消费者和企业所创建的数据,包括视频、音频和文件等)将增加1.2 ZB,或者120万PB。到2020年,数字宇宙将是2009年的44倍。同样出人意料的是,由于文件的平均体积越来越小,对象数目(即数据中包含的文件数量)的增长速度将超过数据总量——即使很多大型视频和音频文件被创建,由此设备和感应器等还创建了大量的小型文件。

“对象存储”就是为了解决文件数量的增加而产生的,但又不仅于此。它可以简化程序。其中,“面向对象”是指基本的存储单元是对象而不是块。对象存储设备相对于块设备有更高的“智能”,上层通过对象ID来访问对象,而不了解对象的具体空间分布情况说到这里,就明白了一点——对象是智能化、封装得更好的块,是“文件”或其他应用级逻辑结构的组成部分。

当然,用一个对象存储一个文件也是有可能的,这是上层的事情,至于上层究竟是个文件系统(如EXOFS)还是让应用直接访问对象存储设备就无关紧要了。而对象存储设备本身也有可能是个分布式的系统——这就是分布式对象存储系统了,强调的依然是这个封装的概念。

对象本身是平等的,也就是说,对象分布在一个平坦的空间中,而非文件系统那样的树状逻辑结构(Namespace)之中,这也就给了我们很大的灵活性——如果需要,可以利用对象构建一个文件系统,因为对象本身包含了元数据信息了,甚至包含了更多的属性,因此,文件系统本身的设计就相对简单了;如果不需要,可以直接用平坦的空间,对于海量文件系统来说,似乎没有这个必要;也可以用一部分对象构建一个树状文件系统,甚至可以为同一个对象存储系统组织成不同的树状文件系统结构。

对于大多数集群NAS厂商来说,更倾向于用一个文件作为一个对象,并且把大量的元数据附加到文件上,从而为文件添加一种标识信息,减少了在存储系统中需要统一存放和管理的元数据量,便于进一步扩展。众所周知,集群存储想进一步扩展的情况下,元数据节点往往会成为性能瓶颈。

由于非结构化数据飞速增长带来的文件管理上的瓶颈,厂商开始在对象存储领域寻求解决方案。例如NetApp今年4月份收购了对象存储领域的领先厂商Bycast, Bycast公司的StorageGRID主要应用于非常大型的、基于对象的、固定内容、容量在PB级的归档数据库,还可以被归档服务供应商用作云服务,可以跨不同地区和不同种类的硬件环境工作。NetApp希望在其Data ONTAP O/S上增加一个对象接口将StorageGRID整合到Data ONTAP之中。

戴尔此前收购的集群NAS厂商Exanet同样在对象存储领域有较强的实力,整合Exanet后推出的DX对象存储系统可用于访问、存储和分发几十亿个文件或其它数字内容,从存档到云计算。戴尔DX对象存储解决方案采用精简,自助管理,对等扩展体系结构,并且经济高效。