华为云发布存储All-Flash战略,数据处理从毫秒进入微秒时代

7月2日,华为在成都发布云存储All-Flash战略,并推出战略落地的首个产品——全新一代极速IO云硬盘,标志着华为云存储正式进入微秒时代。

发布会上,华为云CTO张宇昕表示:“万物感知、万物智能、万物互联的时代已经到来,为加速各项依托云计算的创新产业发展、满足各类新兴应用对数据实时性的诉求,华为云打造出全新一代智能数据底座,引领云上存储从毫秒走向微秒时代。”

华为云CTO张宇昕与华为云中国区副总裁胡维琦发布华为云存储All-Flash战略

万物互联的智能世界,数据处理从毫秒进入微秒时代

华为全球产业展望(GIV)报告显示,全球年数据增量将从2018年的32.5ZB快速增长到2025年的180ZB,但目前企业数据利用率只有10%,数据价值没有得到充分释放。面对海量数据爆炸式的增长和发掘数据内在价值的巨大需求,拥有弹性伸缩、无限扩展能力的云存储正发展成为时代的智能数据底座。

张宇昕表示,随着人工智能(AI)、VR/AR、5G、自动驾驶等技术的发展,应用对云存储的实时处理能力提出了更高标准。对于支撑智能世界的数据平台而言,需要进入百微秒量级,才能满足实时性要求。

华为云CTO张宇昕发表主题演讲

突破“最后一公里”,打造全新智能数据底座

在云端,数据通过服务端软件、网络、存储服务器,最终抵达介质。为了实现这“最后一公里”的百微秒级突破,平均时延达4毫秒的机械硬盘(7200转)成为了第一个被优化的对象。相比机械硬盘,Flash介质具有更强的性能和20μs的极低时延。 华为云存储通过“两个创新、三个加持”打造出全新智能数据底座:

全新Flash-Native存储引擎,释放极致性能之美

针对Flash本身擦除寿命、不支持覆盖写等限制,全新设计的Flash-Native存储引擎采用Flash友好的数据布局,可提升Flash寿命5倍以上,数据持久性高达11个9。引擎可支持不同负载的应用,充分发挥了多核调度优势并保证数据读写路径最优,带来低于百微秒的时延与百倍以上并发访问性能的提升。

全栈架构创新,发挥Flash的极致性能和效能

通过全栈架构创新实现数据IO与控制分离,让芯片重构数据读写,让软件实现智能调度。例如,部分算法被卸载至芯片当中,让网卡可以直接将数据写入Flash介质,从而节省约60%的CPU开销;配合极简网络与数据中心级创新,整体能耗可节约30%,践行绿色环保。

全系列自研芯片加持,芯片间协同优化

业界独家采用全系列自研芯片,从“算、传、存、智”四个维度来增强数据处理全流程。芯片与架构的紧密配合,充分发挥了鲲鹏CPU在多核、低功耗等方面的优势。通过高性能智能网卡芯片、SSD存储控制芯片实现了数据的直接访问。结合昇腾AI芯片,让全栈软硬件联动创新,并首次实现云存储在芯片级的深度定制优化。

硬核数学算法加持,探索性能至优解

华为一直十分重视基础数学。为了应对数据在海量、实时、智能方面的挑战,华为云存储融入了多项核心自研算法,将存储写带宽与数据重构带宽提升数倍的同时,通过自适应差量压缩算法将数据压缩率提升3倍,并可大幅降低网络拥塞发生概率,长尾时延降低30%,时延稳定性更优。

内在智能迸发数据智能,AI加持让存储越用越快

华为云存储将人工智能技术融入分布式存储的全生命周期,智能识别用户业务模型,实现存储平台的自主调优和自我进化,让应用越用越快。AI预测能力,可预判30天性能趋势、提前14天发现故障盘并自动隔离。AI控制的引入,可智能预测用户性能趋势,并根据用户提前配置的自动扩容等策略完成调整,免人工干预保障业务平稳。

华为云存储All-Flash战略:见微知智,极目未来

基于产业趋势与技术革新,华为云发布存储All-Flash战略,明确了以“全闪存、全系列、+智能、全栈创新”为导向的战略布局,让AI加持的云存储时延逼近介质的极限, 让块、文件、对象存储逐步完成全闪存进化,带领云存储由机械时代迈入电子时代。

Flash Now,全新一代极速IO云硬盘面市

会上,华为云发布了存储All-Flash战略落地的第一款产品——极速IO云硬盘。该产品时延低至50~100μs,并具有4GB/s带宽和高达100万IOPS性能,可满足结构化数据库、半结构化数据库和ELK分布式日志应用以及流处理等场景对性能的极致要求,也是主流云厂商中首家进入百微秒以内的云硬盘。

面向万物互联的智能时代,华为云将持续创新与投入,推进落实云存储All-Flash战略。从细微之处发掘智慧的轨迹,让数据学会思考、让信息实时交流,见微知智,极目未来。