深入挖掘数据要素价值,共探数据基础设施未来发展。“2024数据基础设施技术峰会”全天数十场专题演讲为听众留下深刻印象。多位专家在“分布式存储技术与应用论坛”围绕分布式全闪、Shared-Everything、云存储、对象存储、数据安全、数据管理、数字化转型等多维度话题,洞察分布式存储前沿与行业实践。
来自Solidigm、浪潮、联想凌拓、攀钢旗下星云智联、阿里云的技术专家以及知名KOL西瓜哥带来了精彩分享。
Solidigm首席存储解决方案架构师高伟分享了Solidigm对AI存储趋势洞察、创新实践以及架构方案。对于整个AI来说,随着模型的逐渐复杂,它的也是呈指数级增长的,模型的规模也是呈指数级向上增长,对GPU训练和推理的整个的数据需求量是急剧增加,并且性能也要提高。
之所以存储对AI很重要,一个是随着算力的增加,需要匹配高性能的存储,很多企业对GPU和存储都付出很多的投入,再加上整个存储目前占服务器所有的耗电量的35%。随着GPU的耗电量越来越增加,Solidigm在存储上可以帮助企业进一步省钱,通过QLC的高密度,把机架、CPU、服务器、存储的钱省下来,这样也可以省一些电力。
浪潮分布式存储产品线总经理姜乐果深入分享了浪潮面向AIGC的分布式融合全闪存储解决方案,以及如何应对AI场景下极限性能和容量的要求。
2023年浪潮率先布局分布式融合存储,近日在融合的基础上浪潮把全闪存储也做了相应的方案发布。
浪潮发布的分布式融合全闪存储AS13000G7-N系列,通过融合架构,减少数据搬迁、提升AIGC数据处理效率,实现底层一份数据,数据免迁移,AIGC数据处理时间节省30%以上,节省2/3存储空间,同时,通过智能缓存优化,保障了大模型训练速度与质量。
联想凌拓产品经理何川介绍了联想凌拓如何通过分布式存储解决方案帮助企业打造智慧数据底座的实践。
联想凌拓在分布式存储领域拥有多项创新和产品解决方案,包括ThinkSystem DSS并行文件系统和GPU直接通信,轻松提供TB级带宽,助力提速AI训练进程;ThinkSystem DF分布式统一存储系列,采用私有客户端打破协议限制,释放存储底座数据处理性能;DXN系列一体机,通过其内的全自研MagnaScale数据管理平台,帮助企业实现AI和闪存普惠。
在实践案例方面,Lenovo ThinkSystem DXN系列在医疗和制造业中表现出色,提供高效的数据处理、管理、保护和跨集群容灾解决方案,提升医院系统的阅片效率和安全性。在制造业,Lenovo ThinkSystem DXN系列与AI训练平台及高清传感设备深度整合,支持高性能数据处理,确保生产线质量控制的快速准确和精准高效的数据检索和溯源,助力企业质量检测和故障追溯,推动数字化转型。
成都星云智联科技有限公司首席工程师李建瑜作为行业用户,分享了工业互联网领域数字化转型创新实践。
成都星云智联科技有限公司是攀钢集团全资子公司,公司以“工业互联网+智能制造”为发展方向,打造了自主独立可控的工业操作系统——海星XYZLink工业互联网平台,构建了基于平台的工业APP和工业数据驱动的创新服务。
目前海星XYZLink工业互联网平台面向物流、资源管控、成本、能源、安全环保、MOM(MES)、集控、智能调度、智能运维、安全感知、工艺模型、质量、设备等业务,共建有模型2629个、开发APP5835个,解决方案86个,已经应用于504957台/套设备,兼容适配224种工业协议;除了提供了面向全制造过程链的解决方案,还可以采集不同厂家的工业设备现场的设备数据,覆盖了金属材料行业的全流程,并拓展至矿山、化工、有色等产业全流程智能制造、产业链协同,有效助力企业全方位数字化转型和高质量发展。
阿里云高级技术专家王太平深入阐述了阿里云面向AGI时代的数据存储、管理与应用相关实践,受到听众的强烈反响。
海量模型推理催生云原生缓存系统的演进,阿里云AIGC高性能推理存储OSS加速器2.0在提升数据仓库、AI推理数据读取效率方面实施了创新技术方案,通过并行文件存储CPFS加速AI创新,极致性能释放AI算力。
通过阿里云存储的创新实践,构建了一站式智能搜索PaaS服务,为企业开发人员提供基础结构、API和搜索工具,按需使用,开箱即用。
峰会的老朋友,“高端存储知识”公众号作者、存储圈知名KOL西瓜哥从市场和技术的角度,全面分析了分布式全闪的发展。
通过对咨询公司在2023年中国企业存储的相关数据的解读,帮助大家了解了分布式全闪增长的市场驱动力。在技术方面,介绍了以Shared-Everything架构为代表的厂商技术和产品的新进展。
西瓜哥指出,分布式全闪成为热点,将引领国内企业存储市场发展,SSD涨价和部分信创服务器涨价可能影响分布式全闪的推广。闪存利用率成为分布式全闪普及的关键因素,分布式全共享架构优势很大,但目前市场可选择的产品不多。
同时,AIGC的CheckPoint写问题,全共享架构也需要优化,单卷性能将会成为各个分布式闪存产品的竞争热点,全共享架构相关技术还在不断完善,将会推动分布式全闪的快速发展。
通过每场嘉宾Q&A多轮互动,技术专家为听众提供了价值参考,增进了大家对分布式存储和数字化转型等方面的理解,激发创新潜能。