大数据时代的蜂巢:高效、灵活、自动化

如今,更多的系统需要检测、之间的关联性和智能化都在不断的提高。来自各处的数据需要存储,规模之大、增长速度之快都是我们未曾经历过的。2012 年的数字数据量达到2.7ZB,比2011年增长率达48%;90%的公司预计将在今后3年采用或部署云模式;大数据可将数据量增加2-3倍;主流公司的磁盘利用率比平均水平高出25%。这一堆数据狂风暴雨般来袭,如何存储、管理这些数据呢?是的,我们需要更高效的存储方法。

对于追求发展的企业来说,大数据的商业机遇是巨大的。组织需要治理数据并修复他们的商业模式。抢占社交媒体、分析工具和云等新技术先机;解放对于信息的看法,来更好的服务客户,拉开与竞争对手的距离。

解析成熟的企业,其优于业内同行2.2倍,他们的收入增长高于1.6倍,并且有高于2.5倍的股价增值。他们的组织正在迁移应用和文件系统到云中,以增加服务水平,提高灵活度,同时减少成本支出。据调查,90%的组织希望在未来的三年采用或者实质上部署云模式。 云计算预计将在未来5年挽救美国企业达6250亿美元。

智慧星球呼唤存储方法论

智慧的星球的来临,带给IT组织各种挑战:大数据将加入移动和云计算作为下一个”必须拥有“的能力,尤其数字内容量在2012年增长到 2.7ZB(1ZB = 10亿TB),比2011年增长了48%,预计2015年达到8ZB;在未来的十年中,服务器的数量(虚拟的和物理的)全球范围内将增长10倍,由企业数据中心管理的信息量将增长50倍,数据中心将处理的文件数量至少是75倍。同时,全球IT专业人士的数量增长不到1.5倍。

数据的价值正在增加。用户的期望也在不断增加。但是,预算基本持平,没有财力支撑解决数据问题。这将给数据中心带来压力,急需处理数据的三大核心挑战:1.数据的爆炸性增长;2.过去IT架构的僵化;3.IT升级的复杂性。

数据威胁的爆炸性增长消耗掉所有的IT资源:人员,预算,电源,冷却和数据中心占地空间。如果我们想要利用这些爆炸性增长的数据,就必须从根本上改变业务。需要尝试应用一些隐藏在数据中的分析工具,开启新的智能模式。以便让数据的快速发展处于控制之中,更好的管理数据的爆炸增长。

IT架构的僵化阻碍了进步:IT人员投入已达到上限,沿袭使用旧的程序和技术试图支持前所未有的庞大的客户数量和存储容量;同时存储配置也需要耗费数天或者数周;伴随数据量的增加、性能调整、备份和存储管理都需要更多的时间。

不断升级复杂性增加了数据中心的压力:新的应用不断被快速添加,更多的信息孤岛不断产生;应用群组需要更快的存储资源调配和更高的服务水平;并且组织内部存在众多类型的存储系统,并且每一个都是独立的,带有具体的系统要求。

这样的数据压迫,我们急需改变。舍弃目前不可持续的做法,减少存储在组织中错误的花费包括存储在IT花费中的不断上涨;人工成本在存储花费中的不断上涨和每TB信息的生命周期的成本不断上涨。

IBM从合作的1000个客户中以及自己的内部经验,确定了五个存储最好的实践领域以帮助企业发展: 1.回收未使用的存储空间;2.虚拟化并分层存储系统;3.现代化备份、恢复和灾难恢复;4.建立一个存储过程和管理模式;5.自动化归档、保留及法规遵从性。

从这些客户的评估中,IBM验证了存储过程和技术改进在这些领域可以优化存储,提高服务水平,并为组织迎接未来挑战作准备。因为还有许多客户从他们的存储中没有得到预期的收益。

智慧星球需要一个新的存储方案的诞生,因为不改变现有的存储和管理数据方式,是无法将IT预算从存储中转移,用于更多的云计算或者其他的技术革新中。我们需要一个更智能、高效和自动的方法,从根本上改变对于存储的思考。这也就是IBM存储方法论-蜂巢理论诞生的由来。

蜂巢理论应运而生

蜂巢理论是用一个新的方法来设计和部署存储系统。用更智能的存储方法,帮助企业控制他们的存储,使其能够专注于从他们的数据中获得更有价值的见解,并提供更多的商业价值。

蜂巢理论具体包括三方面:效率源自设计;性能自我优化;管理便捷如云。

1.效率源自设计:未来的存储必须是有效率的设计。“高效的设计”是指从一开始就存储储系统中设计高效的性能。预装先进的功能,准备部署,达到操作 的一致性。为什么这很重要呢?存储是现在许多IT企业最大的成本项目。提升存储效率能够最好的释放资源,用来投资其它的提升项目。

IBM的蜂巢理论可以消除复杂的任务,减少存储效率低下所带来的障碍,首先要做的就是让你的人员变得更有效率。通过提供轻松的效率,将存储变得更加 直观、易于管理。最终实现为活动的主数据减少达80%的存储空间要求,同时TB成本减少40%;相比EMC的UniSphere,能够减少47%的管理存 储系统的时间,减少30%的复杂性。

被集成到IBM存储管理界面的实时压缩功能

例如IBM的实时压缩技术,内置在IBM Storwize V7000和IBM System Storage SAN卷控制器里的实时压缩技术,显著减少了存储空间要求。IBM公司的专利实时压缩技术是在活动的主数据上设计的存储压缩技术。

实时压缩技术是智能存储的一个有效的例子。IBM的实时压缩技术自动运行,不需要修改应用或者用户进程。同时在不中断的情况下,数据可在压缩和未压缩的卷中移动。通过利用实时压缩来降低存储成本,回收存储空间等。

实时压缩是IBM最新的效率升级。实时压缩轻松实现效率提升,例如自动精简配置,在线数据迁移和虚拟化,达到了一个新的水平。注:最初,实时压缩和轻松分层不支持同时在一个虚拟磁盘卷上。

2. 性能的自我优化: 未来的存储必须是自我优化的。IBM蜂巢理论的存储自我优化存储操作必须与业务同步,比手动调优更快、更准确。自我优化存储可用于增加关键应用的吞吐量,支持新的工作负载,例如有高IOPS要求的虚拟桌面基础设施。

自我优化存储有效地利用闪存技术,将最活跃的数据移动到最快的存储层中。它不仅需要性能优化,同时需要做到价格优惠。如今,很多组织为了解决性能难题,将几乎所有的数据放置到存储顶层,但却带来了高成本。

IBM的自我优化存储使用基于分析的方法来识别应该存储在低层的数据。“正确分层”是一个在尽可能低的成本上,满足简单的客户端快速存储的要求。到 现在为止,正确分层几乎不可能保持在一个动态的数据中心。有了IBM的蜂巢理论,正确分层可以变得很容易。试想一下,利用闪存优化你的关键应用,用正确分 层优化你的非关键应用,这是智慧的存储。可以将SSD上10%的数据,实现性能300%的提升;自动化地“正确分层”可降低每单位高达50%的存储成本。

3. 管理便捷如云:存储虚拟化是提高敏捷性的关键,因为它能实现数据在线迁移和存储自动配置。存储虚拟化通过提高利用率、自动存储管理任务和提高不可预测的工作负载的灵活性,提升了云计算的经济效益。

对于很多组织来说,一个顶级的虚拟存储的好处是它能够简化虚拟服务器环境。IBM的蜂巢理论就是消除在虚拟服务器的部署过程中可能出现的存储瓶颈,从而提升29%的应用可用性,加速26%的存储部署速度以及存储的直接调配。

这就是IBM的蜂巢理论,也是这三点体现了存储的智能化。方法论的提出,不论从需求还是最终目的出发,都是为了成就企业的the next big thing(下一个大生意),抓住大数据机遇,获取经济价值。

随着商业和技术的不断发展,我们也知道另一个“下一个大生意”,可能就发生在云计算、商业分析和大数据之后。但是企业不可能因为每个新想法的出现而从根本上改变。相反的,需要不断调整自己来适应新的想法。

我们无法猜测下一个大生意会是什么,但是我们知道它必然包括以下特点:需要处理比预计更多的数据;用户期望不断增加,业务需要更快的响应时间;商业成功更加依赖数据价值;花费成本可控。

下一个大生意给存储基础设施带来了新的压力。不久前,TB级存储被认为是企业数据存储;现在,它可以存储在个人电脑中,最后PB级也不被看作是大量 的信息存储单位。以前,你还不能在在飞机上访问信息,但是现在无论在哪你都可以访问了。这样的发展趋势不会慢下来,反而会更加快速发展。这些压力需要 IBM的存储方法论-蜂巢理论,解决当今存储基础设施的效率、灵活度、和自动化难题。