近年来中国AI开源框架市场呈现出蓬勃发展的态势,各类开源框架不断涌现,为人工智能技术的研发和应用提供了强大的支持。这主要得益于国家政策的支持、企业及研究机构的积极参与以及广大开发者的热情投入。
近日,国际权威数据调研机构IDC发布《中国AI开源框架市场研究报告(2024)》报告。报告显示,昇思MindSpore AI框架在2024年新增市场份额达30.26%。
数据来源:IDC中国,《中国AI开源框架市场研究报告(2024)》
昇思之所以能够获得如此出色的市场成绩,得益于其迅速适应AI趋势,通过打造兼容主流生态的开发接口、原生支持大模型及AI4S能力,使能产业及科研创新。昇思通过升级八维混合分布式并行技术,实现原生亲和超节点,从而大幅提升模型训练效率。
实现低成本的模型脚本平滑迁移替换:昇思匹配开发者习惯,兼容业界主流开发接口,已兼容100+Transformers接口、100+Diffusers接口,兼容1300+算子表达,支持灵活对接各种加速库。
满足大模型并行优化要求:昇思原生亲和超节点,在八维分布式并行技术基础上,持续升级超长序列、MoE、多模态模型等多维混合并行策略能力,例如通过RingAtt超长序列并行、3D超长序列并行和2D/3D高维张量并行,使得超长序列大模型训练性能提升20%,通过MoE通信计算并行、Router融合,使得万亿MoE模型训练性能提升40%,通过细粒度多副本、虚拟流水交织并行、序列流水线并行、负载均衡,使得千亿稠密模型训练性能提升20%;提供并行策略自动搜索和仿真执行能力,改变传统技术路径,从过去依赖专家经验制定并行策略、通过集群实测寻找最优策略、周级完成大模型调优,到现在自动搜索最优并行策略,通过Dryrun仿真分析获得最佳测录,实现天级大模型开箱性能。
昇思打造业界首个AI融合框架,实现大模型与AI4S两大领域的原生:持续升级架构,通过支持MPMD多模型多任务调度,训推同构,可自由组合封装RL模块搭建高性能强化学习套件,在线重排训推权重任务,端到端提升吞吐,并可以自动分配切分计算资源,实现多模型多任务并行;具备函数式编程亲和架构,支持Numpy/Scipy原生、自动微分加速,提供高性能强化学习、AI4S使能套件。
坚持投入社区生态,开发者关注度持续增强:自2020年3月昇思MindSpore正式开源以来,陆续创建学术奖励基金、培养原生大语言模型、举办AI框架峰会、成立社区委员会、成为Gitee重要贡献者、创立昇思生态创新中心,已经积累了大量的B端企业合作伙伴和众多企业、高校开发者,截至目前已经有4万+社区核心贡献者、1100万+全球用户下载、10万+代码合入请求、1700+学术论文创新,全球范围内仅次于PyTorch(Papers With Code官网数据)。值得一提的是,昇思MindSpore已经孵化、适配了50+国内外主流大模型,帮助1700+企业、研究院所落地2000+大模型解决方案,包括政府、交通、金融、医疗、驾驶等多个领域。