Cleversafe搭建10EB大数据存储系统

这必然有某种里程碑意义吧?对象存储供应商Cleversafe现在推出了一个达到10EB的系统。

Cleversafe承认目前最大的单一存储系统是来自SpectraLogic T-Finity家族的一款3.6EB磁带库。而Cleversafe有了一个能够与磁带相抗衡的系统,因为它能够在线访问多达1048576TB数据。

当然,Cleversafe现在加入大数据阵营,认为信息是无价的。Cleversafe副总裁Russ Kennedy表示:“然而,只有当一家公司可以随着时间推移,查找这些数据用于推测趋势或者行为分析,并且以具有成本效益的方式,这样才是具有价值的。 Cleversafe的无限数据存储解决方案是实现数据分析的关键。”

Cleversafe之所以能达到10EB是因为它构建一个“便携式数据中心”,其中21个机架和189个节点,每个节点有45个3TB硬盘。 Cleversafe表示,它已经在美国设置了16个站点,每个站点有35个“便携式数据中心”,同时有数百个读写客户,交付对数十亿目标的即使访问。

这项技术是将数据分散在整个部署中以保障数据安全,无需磁带备份。

以此同时,作为竞争对手的目标存储供应商Caringo也将产品升级到5.5版本,增加了“通过分块编码以及大到4TB的目标对未知大小的文件的支持”。并且增强了目标存储的管理和搜索。

目标存储的优点在于它可以比文件系统更快更廉价地处理大量文档和非结构化数据——元数据智能地定位存储节点中的目标,并且远远快于文件系统在文件夹结构中定位文件的速度。例如,这种系统可以针对那些流处理视频和音乐的企业。

保存10EB数据是需要一定成本的。Kennedy表示:“现在,搭建一个10EB的存储系统可能需要将近450万个3TB硬盘。虽然现在3TB硬盘只要150美元,但是和Cleversafe系统一样的的存储系统单是在硬盘这一项的成本仍要7.05亿美元。整个系统——包括机架、网络设备和 Cleversafe软件——将达到十几亿美元。”