DoSTOR专家博客 Henry Newman展望存储市场

DoSTOR专家博客:Henry Newman是国外专业存储网站的撰稿人,在高性能计算和存储行业从事了27年的顾问工作。

又是一年年末,现在让我们来回顾一下我在一年前所做出的存储预测,并且展望一下在2008年存储领域将会发生什么。

开始,我们将回顾一下在去年所做出的预测。对我来说,这项工作一直都很有意思,因为我要看看市场是如何逐渐符合我的预期的。我们将分成软件和硬件两个部分,然后看看存储市场明年以及其后的趋势。

去年软件方面的预测

对象存储

去年,我写道"对象存储将从2007年开始应用于主机方面。"但是对于存储设备来说,包括替换RAID控制器在内的对象管理程序要到2008年才能实现。这将是多年来在存储技术领域发生的第一次主要变革。它将影响诸如HSM(分层存储管理)、写入重建和虚拟化等领域。

我的认识看起来有些想当然了。现在没有主机端的对象存储文件系统或者设备驱动程序,而对象存储管理程序也不会在2008年替换掉任何RAID设备。这主要是因为现在除了Panasas以外没有任何主机端方面的对象存储环境。这是一个先有鸡还是先有蛋的问题。如果没有厂商在这方面进行努力,就不会有任何改变。

POSIX(可移植操作系统接口)变化

去年我说POSIX文件系统的语义"在2008年元数据将会升级到可以共享的文件系统,这是一个相当容易的预测,但还是需要验证。目前的标准已经25年了,我们需要更新这些标准。"

这个过程目前正在进行,而且还有一个实施参考。该组织的行动比预期要慢,但是方向还是正确的。对于2008年发展趋势来说,我的预测没有错,但是就目前的发展速度来说我的预测还是存在一些问题的。

元数据

我曾说文件系统的元数据分配和管理"将在2007年被视为一个问题,而将在2008年得到解决。对于ls-I和find所产生的问题以及对文件系统性能所带来的影响,诸如数据库和文件系统的其他附加手段将解决这个问题。"

一些厂商已经开始着手解决这个问题,并将数据库用于元数据管理。因此这是我预测对的地方。

存储管理

 "存储管理不会有任何主要标准,管理成千上万个磁盘和RAID控制器并不是那么容易,更不用说标准化了",我写道,"厂商不能联合起来支持所有的管理曾和报告层。今天现有的全局工具并不能显示所有可调整的参数,或所有不同错误情况的细节。"

是的,SNIA(全球网络存储行业协会)已经发布了SMI-S(存储管理计划规范),但是还是有很多厂商并没有完全遵守,而且更重要的是,诸如每个磁盘的S.M.A.R.T.(自我监测、分析及报告技术,该技术提供了一个搜集磁盘错误信息的公共框架)数据这样的信息不能被采集到。一些厂商不同意这点,并声称他们提供所有信息,但是SMI-S还没有强大到能提供所有内容。记住,SNIA只是一个为了在SAN领域达成协议和进行协调的厂商协会。有时候很难达到很好的互操作性(现在比5年前要好,但是对新技术来说还是一个问题),更不用说存储管理和错误统计数据上的一致了。我在这方面是对的。

软件方面的总结

我的一个预测错得很厉害,而另一个有可能在2008年是错误的,两个预测正确。今年正确率只有差不多50%,并不是很好。

去年硬件方面的预测

磁盘驱动器

去年我的预测:"磁盘驱动器密度的增长速度将继续在2007年和2008年放慢。这是一个容易的预测。驱动器厂商将推动SAS(串行接口SCSI)驱动器。鉴于SAS驱动器的性能特点,在2007年末和2008年,它可以替代光纤通道驱动器和SATA(串行ATA)驱动器。鉴于成本和可靠性的考虑,SAS 2.5英寸驱动器将在2008年进入到中端和企业级RAID控制器。数据库索引文件以及文件系统元数据需要更高的IOPS(每秒输入/输出),而2.5英寸驱动器正符合这方面的需求。"

我认为这个预测都是对的,进入2008年,所有的事情都正在我所预测的轨道上进行着。一个正确。

磁带

我曾说厂商"将在2007年末宣布支持1TB以上的磁带,并在2008年开始发售这种磁带。磁带密度和性能至少在几年内将继续以超过磁盘的速度增长"。

虽然预测比较接近,但还不能庆祝。IBM的TS1120现在是700GB,而LTO-4是800GB。因此我在这上面错了。

RAID(独立磁盘冗余阵列)

我曾说来自高端企业和中端厂商的RAID控制器将在2008年支持10Gb光纤通道,InfiniBand和10Gb以太网。"这个预测的前两个部分很容易,但是我对2008年10Gb以太网的预测可能有风险",我写道,"我认为RDMA(远程内存直接读取)技术将成为企业的标准"。

2008年引入10Gb以太网还需要一定时间,但是可能还是会有一些厂商做这项事。T11的FCoE(以太网光纤通道)使得2008年以后的进度将变得更快,而这也将是阻止iSCSI市场占有率扩大的最后一道防线了。看起来我对于2008年的预测是错的,但是2009年将不会。

网络文件系统NFS

 "通过NFSv4(网络文件系统版本4)和pNFS(并行网络文件系统),你将看到NAS设备和存储局域网设备由于诸如10Gb以太网这样的高性能以太网连接而融合起来"。我预测道:"大型存储局域网的管理复杂性很高,而大量网络附加存储设备的管理也不容易。鉴于网络文件系统的性能局限性,网络附加存储不能达到和存储局域网一样的性能,而且许多网络文件系统是围绕着网络附加存储而设计的。如果网络附加存储厂商重写及/或更新他们的文件系统,并采用NFSv4和pNFS,那么他们将能够达到和存储局域网一样的性能。将这个和对象存储结合起来,虽然有些遥远,但是如果实现将改变我们的世界。"

NFSv4.1标准将整合pNFS。NFSv4.1标准预计将在2008年早些时候公布并等待批准。这将和10Gb以太网一起改变我们的存储世界。因此,这方面我又预测对了。

大型交换机

我曾预测能够全双工全速运行于所有端口的大型光纤通道和IB交换机将在2007年底公布并在2008年上市。"现在,大型交换机被限制在300个端口以下",我说,"鉴于合并需求,我认为这个数字将会至少翻三倍"。

思科有一个528FC光纤通道交换机,但是并不是所有端口都能全速全双工。在InfiniBand方面,思科,QLogic和Voltaire都限制在288个端口。因此我这个预测错了。

企业级驱动器

我曾说企业级驱动器厂商"将着手开发除光纤通道之外的接口,但是这个预测将到2008年才会实现。与以太网相比,每台驱动器光纤通道接口的高成本将促使厂商考虑采用其他的技术。"

这里我是对的。企业级驱动器厂商开始走向SAS,至少现在是。如果有FCoE,可能又有所变化。我不能预测什么时候将开始,但至少是这个方向。

PCIe总线

我曾预测PCIe总线接口性能的增长速度将超过内存带宽的增长速度。现在,标准的是使用8通道PCIe总线,也就是大约2000MB/秒;鉴于大部分单板上的内存带宽是6400MB/秒,因此这个比例是3.2比1。"随着16通道总线的出现,这将是一个非常容易的预测",我写道,"现在建立一个能够高速移动数据的总线要比从内存读取或写入数据更容易"。

这个我也是正确的。PCIe 2.0现在已经出现,性能也翻倍。内存带宽在这一年却没有翻倍。

硬件方面总结

我有四个正确,两个错误,和一个可能错误。我给我自己打了57%的正确率–对于棒球运动员或控球后卫来说这很好,单对一个存储专家来说却很糟糕。

2008年和2009年的预测

那么现在展望一下未来。其中一些预测很容易实现,而另一些需要一点时间。

软件

  • 2009年以前,至少还有一个厂商将支持T10 OSD(对象存储设备)文件系统。OSD文件系统的扩展性将可能会比目前大多数基于块的文件系统更好。
  • 多个NFSv4.1的实施将会在pNFS的支持下在2009年初进行。这是一个值得关注的标准,因为它有能够显著改变大环境的潜力。
  • 对于大型系统设置来说,错误管理将不会有明显改变。虽然我们需要明显改变我们的错误管理,但是未来将没有这种改变。不幸的是,这也是一个容易的预测。
  • 不可探测的错误将更多的支配T10 DIF(数据完整性域)和Sun ZFS(Zettabyte文件系统)以外的数据路径的软件变化。人们开始认识到不可探测的错误所带来的问题要比我们原先所想的要大得多。

硬件

  • PCIe 2.0(5GB/秒)将可用于使用AMD或Intel CPU的服务器。
  • 在年底以前,针对新系统的SAS驱动器的出货将超过光纤通道驱动器的出货。
  • SAS 2.5英寸驱动器在2009年初将成为企业级驱动器的标准,其出货将超过3.5英寸驱动器(这需要一点时间,因此我们需要看看到底结果如何)。
  • 8Gb光纤通道的主机总线适配器和交换机将在2008年底进入市场。这将对2008年的市场产生有限的影响,真正产生有效的影响要到2009年。
  • 2008年磁带的未压缩密度最终将达到1TB。如果你每年预测一次这个,最终都会正确。
  • 磁盘驱动器密度继续增长,但速度会放慢。这是一个很容易的预测,除非有什么不可预测的技术突破。
  • 闪存技术将开始被整合进企业环境,以解决每瓦特IOPS的问题。我将在明年的一篇文章中撰写更多关于闪存驱动器的内容。

这就是我对于2008年和2009年的预测。去年我的准确率和抛硬币差不多,希望今年这个行业不要再让我大跌眼镜。节日快乐,并祝2008年兴旺。