油气田勘探开发是一个集石油天然气地质勘探、油气田开发、地质开发试验和计算机应用等为一体的综合性应用科学,具有数据报表类型多,数据量非常庞大等特点,每一个勘探单点都会有几个GB甚至几十个GB的数据量。随着技术的发展和进步,原油公司对地球勘探开发的要求越来越高,需要处理的数据量呈“指数级”难以想象的速度增长,需要借助高性能机群的数据处理能力,在最短的时间里对采集数据进行精细处理,通过综合解释研究,为下一步的钻井、开采提供真实反映地下构造的基础数据。应用涵盖了地震资料的处理解释、测井资料的处理解释、试井分析、油气藏数字模拟、盆地分析模拟、圈闭描述评价、油气描述及储量计算等。
油田勘探开发数据量大
一条二维数据测线的地质资料,数据量达数十GB;一条三维数据测线的地质资料,数据量高达数百GB;每次进行并行计算的数据总量更是高达数十TB乃至数百TB。
高性能处理要求高I/O带宽
高性能计算集群极大的提高了资料计算处理能力;系统的计算能力远远高于磁盘带宽,使得系统I/O性能与计算能力间产生瓶颈;如在几小时内完成至少100平方公里的三维地震数据处理,其I/O峰值就可达每秒数百兆;高数据量要求高计算并行度,高计算并行度带来对数据访问的共享与并行性能要求。
海量数据的存储管理
数据容量高达数百TB且还在不断增涨;地震资料数据异常珍贵,损坏、丢失都会造成巨大损失;管理员需要加大管理灵活度,要求能够对数据进行统一调配。
高可用性与可扩展性需求
需要灵活的存储架构,具有故障恢复、故障切换、负载均衡等功能;不影响原有系统的前提下进行计算节点、传输带宽、数据迁移能力、数据存储容量等方面的扩展。
作为国内存储技术领先者,中博集群存储是由深圳市中博科创信息技术有限公司自主研发的、专门针对高带宽、高并发和海量数据存储应用而设计的统一存储平台。其强大的分布式文件系统,为用户提供一个高性能、高可靠、高扩展和低成本的数据存储环境,依靠灵活的集群架构满足石油和天然气公司的需求。
按需扩展容量与性能
中博集群存储单套设备可提供PB级的海量存储空间,系统采用Scale-out扩展方式,支持在线扩容,且性能会随容量的增加而线性提升,很好的满足石油勘探企业未来业务快速发展对存储空间和带宽的更高需求,避免因用户需求不断增长而带来的数据迁移和应用中断问题。
支撑高并发数据访问
中博集群存储基于分布式文件系统,通过先进的并行计算有效提供数百GB/S的聚合带宽,满足了高性能计算集群对IO的需求;同时,中博集群存储的自动分层功能,会根据不同性能的硬盘设定不同的权重,访问较多的数据存储在性能较好的硬盘中,访问较少的数据存储在性能差的硬盘中,保持系统整体最优的性价比;对于热点访问的数据,系统会自动增加数据副本数到其他存储节点,从而提升热点数据的访问性能,应对高并发访问压力。当数据访问频率降低,在其他节点上新生成的副本则会自动删除。
提高资料处理连续性
中博集群存储各个组成模块均采用集群的冗余机制和高效、准确的失效检测算法来保证整个系统的高可用性。系统任一节点故障,都可以智能的进行自我修复,并且不影响前端应用的正常运行。通过副本保护机制,在数据安全性上比传统raid1
aid5做到更高级别的容错机制,为数据的安全可靠提供强有力的保障,实现50%的节点宕机无影响。
无缝兼容现有应用环境
中博集群存储可整合多种类型的存储资源,支持Windows/Unix/Linux等异构平台,实现面向对象存储、块级存储、文件级存储的全接口支持,能提供NFS、CIFS、ISCSI、FC、Amazon S3、POSIX、HTTP、FTP等。中博集群存储系统可与前端应用系统等无缝结合,提供统一的数据管理平台,使数据计算处理更加高效与精准。
具体产品详情可参考中博科创公司网站:http://www.zb-kc.com。