HDS:“三位一体”存储迎接海量数据时代

如今,瞬息万变的信息世界,无论是企业还是组织,无论金融行业、电信行业还是医疗行业,数据都是大家所珍视的“瑰宝”,是业务正常开展的基础。而随着用户数量的急剧增长,数据形式也呈现多种多样的形式,比如医疗影像图片和文件、手机视频文件、照片文件等等。这种数据量的快速增长和数据形式的多样化,标志着海量数据时代的来临。

根据Gartner对来自8个国家的1004家大型企业的调研显示,数据增长是大型企业在部署硬件基础设施方面的最大障碍。调研结果表明,有47%的受访者将数据增长列为第一挑战;有62%的受访者表示,计划在半年内扩充现有数据中心的硬件容量;另有30%的受访者已经有计划新建数据中心。Gartner首席研究员Naveen Mishra对此感叹道:“自从2010年全球经济逐渐恢复开始,各公司数据增长的量级平均达到了40%到60%,而且其中包括剧增的非结构化数据数量。”另一家研究机构IDC的研究报告同样鲜明地体现了数据增长的“威力”。 IDC今年发布的报告显示,在未来3年中,为应对数据量激增而部署的新存储空间将增加至现在的6倍,从而给全球的IT厂商带来数据管理、数据保护、长期的数据维护等方面的挑战和商业机会。

对象存储:为大数据而来

所谓“大数据”,更深层的含义是对海量数据的利用、分析以及挖掘。在这里所指的海量数据,不仅仅包括对生产系统所产生数据的保存,也包含了对旧有数据的复用和统一管理。然而,没有对旧有数据的可靠保存和快速访问,又何谈“复用”呢?在IT管理人员对于海量数据感到手足无措的时候,作为数据中心核心的存储面临更严峻的考验:难道企业需要硬着头皮在“存储采购”这个看似永远也填不满的黑洞中越陷越深?

对象存储的概念并不是第一次提出,然而作为大数据时代能够为用户提供易于管理、安全可靠而又能够随时进行快速访问的数据存储方式,对象存储再一次以其独特的技术优势被时代“召唤”而来。

与我们常见的块数据和文件数据不同,对象数据通过将对象ID、描述、自定义内容等大量元数据(metadata)信息附加到了“对象”文件上,通过在文件上“附着”大量的元数据信息进行归档、恢复和搜索,相对于传统的文件数据仅仅靠文件名、创建人、创建时间和文件类型四个信息标识,对象存储具有更加准确的识别和因元数据减少占用空间更少的明显优势,从而能够明显提高存储空间的利用效率和检索时间。同时,依托磁盘在读写访问时的高速特性,使得对象存储无论从文件结构还是介质速度上都满足了大数据和云计算的需要,用户能够在数据“复用”时快速搜索到很久之前一直留存的归档内容,及时调用。一般来说,文件存储系统对于文件索引所容纳的条目数量都有所限制,而这一点在对象存储系统上就不存在问题。当单一存储介质内的文件数量达到上百万甚至上千万时,对象存储在数据检索方面的“威力”就变得更加明显。

更值得一提的是,对象存储在数据检索方面也有巨大优势。数据块和文件存储的优势在于对频繁访问的信息——也就是我们常说的“热”数据——的处理和读写访问,而对于那些仅仅用于保留或者法规遵从,以及不经常被访问到的“冷”数据,对象存储能够凭借更好的性价比、扩展性以及可管理性担起存储的“重担”。相信所有IT管理员都有所体会,“冷”数据在企业数据总量中占据的百分比要远远超过“热”数据量。当然,对于“冷”数据归档,我们还有一个选择,那就是磁带。众所周知,磁带在存储容量以及访问速度方面的限制,已经越来越无法满足当前的大数据增长需求,而更多是作为离线归档的选择。因此,可以说对象存储无疑已经成为目前近线归档的不二选择。

可以预见,是否支持对象数据存储,已经成为衡量存储系统优劣的一个关键因素。随着数据容量持续激增到PB和EB级别,智能存储、复制、搜索的能力已经成为高效的数据管理战略。基于对象的文档系统是存储系统最基本的能力,对于对象的存储能力使企业能够将数据从应用服务器中分离出来,从而在云中实现更强的灵活性和移动性。

未来存储趋势:“三位一体”

然而,仅仅通过提供快速的访问速度和检索能力,并不能够完全满足“大数据和云计算时代”数据存储的各方面需求。为了满足客户日益增长的数据处理和信息价值需求,日立数据系统近期推出了Hitachi Unified Storage(HUS)以及统一管理架构,就是将数据以三种不同结构——块数据、文件数据和对象数据,为用户带来一个灵活、高效、低成本而且易管理的存储解决方案,以应对大数据和云计算需求的挑战。

Hitachi Unified Storage的重要特点之一,就是“整合”,堪称 “三位一体”。这里的“三位”,也就是数据的三种不同结构——块数据、文件数据和对象数据。Hitachi Unified Storage将三种不同的数据结构能够分享于一个单一存储池的存储空间内,并且可以进行自动分层和迁移、快速文件快照、克隆以及统一管理。这种将三种数据结构“整合”的存储方式,不仅是存储业界的一种技术创新,更是未来数据存储的趋势,真正实现了对“数据生命周期”的有效管理和利用。用户不必再为节约生产系统的空间,而将不经常被访问的“冷数据”从一个系统迁移到另一个系统进行归档;也不必为了实现数据的复用和挖掘,再将归档数据“盲目”转移出去。Hitachi Unified Storage以一个统一的管理界面和单一存储池,支撑起更多业务的应用,简化了IT管理员的操作,真正实现了“动态”的归档。

另外,Hitachi Unified Storage不同模块间的松耦合架构,让用户完全可以根据自身的需要来配置存储系统:需要NAS的文件访问,就配置File Module;需要SAN的快速读写,就配置Block Module;如果对于对象存储的磁盘归档感兴趣,则可以通过基于对象的文件系统进行支持。Hitachi Unified Storage这种做法,完美体现了日立数据系统“单一平台承载所有数据”的“统一”特点。

除此之外,Hitachi Unified Storage还能够支持日立数据系统业界领先的内容管理平台Hitachi Content Platform,用以在对象存储数据中实现法规遵从,并按照应用场景的不同允许用户自定义元数据。目前,包括Hitachi Content Platform,Hitachi Command Suite和Hitachi Data Discovery Suite等在内的产品都已经支持Hitachi Unified Storage,由此,日立数据系统在业内首个实现了无论是在存储系统,还是在平台架构,亦或者是软件产品方面都能够进行互通和统一管理的真正“一统”。

日立数据系统在产品上保持“存储空间共享”的做法,体现了其充分为客户考虑,帮助客户解决数据不断增长带来的问题,并专注于更高容量和管理效率的愿景。借助业内领先的中高端存储和数据管理解决方案,日立数据系统将携手各行业客户应对大数据时代的挑战。