DoSTOR存储视点 纽约证券交易所和它的存储

DoSTOR存储在线–很少有哪个IT经理会津津乐道他处理一个挤得水泄不通的存放了一千亿数据记录的存储。不过迅速扩大的纽约证券交易所( NYSE )就有这样一个系统。

七年前该证券交易所开始工作,在1010data公司的帮助下建立一个数据库,为其众多客户能提供市场数据。七年过去,他们现在的数据量已经多的惊人了。 

纽约证券交易所( NYSE )的Euronext数据产品副总裁Mark Schaedel表示,“北美所有的历史交易数据都在”,他还补充说,每天都有7.5亿的新纪录添加到系统中。 NYSE在2006年与Euronext(泛欧)证交所合并,并且NYSE还与印度、巴西等地的同行建立伙伴关系。Schaedel称,“该平台也将支持这些交易所的类似数据”,NYSE的客户可以通过NYSE网站NYXdata.com或其FTP服务器访问其存储系统。 “据我所知,我们有无限的空间可满足客户需求” 。

该15TB的存储目前包括6台直连SAS存储的Dell服务器,1010data开发的一套软件1010Vision,用于分析多个数据流。1010data的业务开发副总裁David Frankel表示,“(这款软件)创建了一个网格,可以在通用的硬件上高效并行的处理查询。采用通用硬件架构的一个好处就是我们可以仅随需添加硬件” 。

据Frankel称,直接附加储存装置还提供了一个更大程度的可靠性。“集中存储,如SAN在管理方面有优势,但在单个服务器需要专门的、性能保障的环境当中,集中存储方式并不适合”,“每个服务器都可以依靠自己专用的带宽连接存储系统” 。

NYSE的Schaedel告诉记者,他们的下一个大项目是整合Euronext的数据库,其中“一定比例”已添加到该系统供内部使用。

他表示,“我们从一些内部资料着手,使我们的管理可以对国际市场有一些深入了解”,“在适当的环境下,[1010data]将支持从Euronext到其他任何我们收购的伙伴们的数据。这会作为我们全球扩张战略的一部分”。

证券交易所不像1010data的许多客户那样,把硬件放在其自己的数据中心。该存储由1010data进行远程管理。

“这意味着任何数据可以在数据中心以安全的方式存储,仍可以在全球范围内进行存取”,暗指严格遵守金融部门的规章,“数据中心的防火墙和API保证我们存取数据是安全的—只有某些特定的数据集可以按照我们的安全模式进行存取”。

虽然schaedel不会透露项目的金额,但他描述了选择一个半管理服务背后的理据。

“我们的核心业务并不是管理数据,历史数据保存需要一些独特的专门知识”他称,“这真的简化了我们的业务,它让我可以把精力更多地放在员工和资源上”。