高性能计算“分布式通用存储”市场加速形成

一直以来,高性能计算系统中的计算部分和存储部分紧密集成,因此高性能计算属于一个专属系统,但是云计算、大数据等新兴技术风起云涌的今天,高性能计算系统中的计算和存储呈现分离、解耦的趋势,形成了计算和存储分开采购的局面,其中,以“分布式存储”为代表的通用存储市场加速形成,成为一种新的趋势。

存储系统成为推动高性能计算发展的关键

据新华网等相关报道,高性能计算在很多行业应用所涉及的数据量已呈现井喷式增长。如油气地震勘探网格密度每增加1倍,数据量就增加3-4倍;电影渲染从2K升级到8K,数据量增长16倍。除此之外,高性能计算要承载的计算任务,也更加复杂、多样,使得作为数据的承载者,高性能计算的存储系统成为推动高性能计算产业发展的关键。

存储系统的性能决定了计算机数据输入输出(I/O)和缓存的实时处理能力,需要能够支持成千上万客户端同时访问,支持PB甚至EB级的超大规模数据存储,支持TB/s的聚合I/O带宽能力,系统性能能够随着硬盘的增加而线性提高等。这些对高性能计算机存储系统的架构、存储介质、I/O通路、高性能存储网络技术等提出了更高要求,决定着高性能计算的计算速度。

同有科技分布式存储产品迭出,助推高性能计算“加速”

同有科技分布式存储系统NCS10000系列产品的出现,针对高性能计算不同需求给予了    最优适配。基于去中心化的全对称、云原生的线性扩展分布式存储架构,搭载高主频处理器、低延时高速网络、企业级NVMe SSD 等业界领先技术的硬件平台,通过端到端实时并行处理分布式文件存储系统的加持,同有科技分布式存储系统具备极致性能、超大规模横向扩展能力、高并发及始终如一高可靠等存储能力。

Ÿ微秒延时:在高性能计算场景下,如果存储延迟高,会让运行速度慢下来,所有的核心都需停下来等待读写进程的完成,所以存储延迟低,可以加“快”运行速度。同有科技通过高性能、低功耗的全新NVMe SSD介质和自主研发的具备智能优化引擎的分布式文件存储系统双管齐下,在彻底消除协议处理和转换的“瓶颈”的同时,显著提升数据流转全链路速度,单节点大于6GB/s,实现业界少有的分布式存储微秒级延时的极速性能。

按需扩展:高性能计算应用在大规模模拟中, 常常会遇到不同体量的数据存储问题。比如分子模拟常规100万原子体系中, 每个原子单精度浮点数仅存储三维的速度和位移数据,大约需要24MB存储空间, 如果需要1万帧轨迹数据则需要240GB文件, 如果再需要不同温度和压强的组合条件下的轨迹数据, 对存储空间需求剧增【1】。同有科技通过采用全对称分布式存储架构,在线可扩展至EB级别存储容量,支持多节点在线平滑扩展,实现I/O的客户端数目、I/O带宽和存储容量根据用户需求实现了高可扩展性。

超高并发:以制造仿真、基因测序等典型的高性能计算应用为例,它们无一例外均需要计算节点具有较大的内存带宽能力。同有科技依托在存储架构、存储管理软件及存储核心算法等方面的核心技术,采用特有的共享锁机制,实现对数据进行写入或读取时可以获得最大程度上的I/O并发能力,轻松承载“数千个超高并发访问+上万个超高并发节点+百亿级超高文件存储“。

始终如一:高性能计算在执行计算任务的时候,有时几小时,也有可能长达几周甚至数月,这个过程产生的数据,都是非常珍贵,是通过大量时间和资源投入获得的,且难以重复获取,比如油气勘探,因此对存储的可靠性要求非常高。同有科技打造了基于”硬件+软件+体系结构+网络“于一体的高可靠存储平台,具备自我调优能力,实现无论复杂性如何,无论大文件、小文件还是混合负载场景下,都提供始终如一的快速存储,保障数据零丢失、业务零中断。

同有科技分布式存储系统NCS10000系列,目前已经成功在石油勘探、测绘、大数据分析、卫星遥感等众多领域应用,积累了大量的实施经验,凭借极致性能、安全稳定和高效运维收获了用户的众多好评。未来,同有科技将在分布式存储领域加速创新,持续为高性能计算应用提供高速、弹性、稳定的数据存储服务,助力高性能计算加速。