2025年1月13日,新年伊始英伟达全球网络专家邵剑锋和中国区市场总监陈龙一行访问了绿算技术公司,就绿算技术的存算分离方案如何与英伟达NVIDIA® BlueField®-3 DPU(数据处理单元)进行深度整合,共同打造整体智算存储解决方案进行了深入交流和探讨。绿算技术总经理任雪峰、副总经理黄飞、副总经理孔维海等高层领导热情接待了英伟达一行,并共同参与了此次技术交流与合作洽谈。
在交流过程中,绿算技术深入剖析了其存算分离方案的技术原理、独特优势以及广泛的应用场景,并着重探讨了异构存力在构建先进存力中心中的关键作用。存算分离作为一种新兴的数据中心架构理念,通过将存储和计算资源独立部署和管理,实现了资源的灵活扩展和高效利用。在大数据、人工智能等高强度计算存储需求面前,该方案能够显著提升系统的性能和可扩展性,为数据中心的高效运行提供有力支撑。
同时绿算技术分享了“异构存力调度”构建先进存力中心的思路,强调了异构存力调度的重要性。异构存力本质是实现将现有Server storage,如HDD、SAN、蓝光、带库以及最新的NVMe、SSD统一纳入管理体系,构建不同的文件和管理系统,适配用户的需求。
通过对接口的调度,做到多种数据的平滑匹配及流转。同时,通过以RDMA为主的网络加强数据的快速流动。异构存力调度还包括实时性能监测、故障点定位、业务级快速恢复以及数据容量评估和交易管理等内容,引入数据全生命周期管理的过程,以实现对异构存力的高效管理和调度。
英伟达方面对绿算技术的存算分离方案及异构存力调度理念给予了高度认可,并详细介绍了NVIDIA®BlueField®-3 DPU的先进特性和强大功能。BlueField®-3 DPU作为英伟达最新一代的数据处理单元,不仅集成了强大的网络、存储和安全功能,更在存储卸载方面展现出卓越的性能。它能够实现对块存储、文件存储、对象存储或NVMe存储的仿真,并且可以在数据落盘时对加解密操作进行硬件卸载,各种签名操作也都可以分流到DPU上,其弹性块存储可达到18M的IOP/s的读写性能,虚拟化I/O加速可达到80Mpps的性能,极大地提升了存储处理效率和系统响应速度。
此外,BlueField®-3 DPU支持高达400 Gbps的网络速度,通过GPUDirect Storage和RDMA over Converged Ethernet(ROCE)等功能,可实现高效、低延迟的数据传输,对于高速数据密集型应用程序至关重要,能够满足AI大模型等对存储性能的极高要求。
双方就如何将绿算技术的存算分离方案、异构存力调度理念与BlueField®-3 DPU进行深度整合进行了深入探讨。通过技术对接和方案优化,双方一致认为,将存算分离方案、异构存力调度与DPU技术相结合,能够充分发挥各自的优势,形成更加高效、灵活、安全的智算存储解决方案。
例如,借助BlueField®-3 DPU的存储卸载能力,可将存储接口协议以及去重、压缩、安全等操作卸载至DPU,实现数据按热度自动分级及分区存储,从而优化存储性能,降低CPU负载,提升整体系统效率。
同时,BlueField®-3 DPU的硬件加速功能可大幅提升虚拟网络转发能力与网络带宽和PPS处理能力,为存算分离架构下的数据传输提供更强大的支持,进一步提高数据中心的运营效率和性能表现。此外,通过异构存力调度平台,可以更好地整合和管理多种存储资源,实现数据在不同存储介质之间的高效流动和智能调度,进一步提升数据中心的存储资源利用率和数据处理能力。
此外,双方还对未来智算存储方案以及存算分离技术方向进行了深入畅想。随着人工智能、大数据等技术的不断发展,数据中心对存储和计算资源的需求将日益增长。存算分离与DPU技术的结合,以及异构存力的有效调度和管理,将为数据中心提供更加高效、灵活、可扩展的解决方案,推动智算存储技术的不断创新和发展。
例如,通过将任务卸载到DPU,可缩短IO访问的响应时间,面向特定场景如虚拟化场景的虚机直通、大数据场景算子下推、shuffle协同等,可极大地提升系统运行效率。而且,这种结合还能够更好地满足金融行业等对数据安全性和隐私保护的严格要求,通过DPU的高性能硬件安全防护和加解密处理能力,支持虚拟化/容器深度安全防护,为企业构建更加安全可靠的数据存储和计算环境。同时,异构存力的调度和管理将为数据中心提供更强大的数据处理能力,支持更复杂的数据分析和人工智能模型训练任务,为各行业的数字化转型和创新发展提供更有力的技术支撑。
最后,双方表示将进一步加强技术交流与合作,共同推动存算分离、异构存力调度与DPU技术的整合与应用,为数据中心行业的发展贡献更多力量。绿算技术总经理任雪峰表示:“我们非常期待与英伟达的合作,相信通过双方的共同努力,我们能够打造出更加优秀的智算存储解决方案,为客户提供更优质的服务。”英伟达全球网络专家邵剑锋也表示:“绿算技术在存算分离和异构存力调度方面有着独特的优势和深厚的积累,我们非常期待与绿算技术的合作,共同探索智算存储的新未来。”此次合作有望开启数据中心存储与计算融合发展的新篇章,为各行业的数字化转型提供更强大的技术动力,推动数据中心行业向更高效、更智能、更安全的方向发展。
绿算技术GP系列产品
GP5000 系列采用先进的全闪架构,搭配 RoCE 协议,极大地提升了带宽使用效率。在强大的 PCIe Switch 协议加持下,数据读写高效有序。基于 RDMA 技术,产品存取时延大幅降低。并且,GP5000 系列在单机 2U 机架空间内,展现出惊人的性能,聚合传输带宽可达 600Gbps,IOPS 高达 1620 万,存取时延不高于 20 微秒。凭借这些优势,GP 产品广泛适用于高性能计算、云计算、大数据处理、人工智能等领域,为各行业的数字化发展提供了坚实的技术支撑。