华为黄涛:以芯致远,构建安全可靠的存储与数据基础设施

2019年7月23日,华为智能数据与存储产品线副总裁黄涛在于西安举办的2019存储与数据峰会(DSS)上发表了题为《以“芯”致远,构建安全可靠的存储与数据基础设施》的主题演讲,介绍了华为在存储系统方面,在数据库方面,在操作系统上的创新方案和实践应用案例。

以下内容根据现场速记整理:

黄涛:各位领导,各位来宾,各位媒体朋友们,我今天代表华为公司在这里发言,今天要讲的题目是:以”芯”致远,构建安全可靠的存储与数据基础设施。我们知道,过去40年已经形成了一个完整的IT系统生态,但在当前,这个生态正在发生一些变化。

我们经济经历了三个时代,农业经济到工业经济,工业经济到数字经济。据有关报道数字显示,2018年全球数据量大概是6.5ZB,2025年将增长到180ZB,这个增长量非常大,各行各业都在挖掘数字价值,这让数据成为了我们的生产资料,在这么大的海量数据的基础上,我们怎么识别、挖掘、提炼数据的价值呢,这个可能需要智能,所以,智能成了我们的生产力。

数据+智能已经在各行各业使用起来了,比如北京在打造的数字生态城市,让数据流动起来,让老百姓少跑路,使得政府的效率提升了50%;深圳的公路交通,原来的车看灯,现在变成了灯看车,也是通过智能的技术,使得我们的交通流通率提升了18%;金融交易安全,金融领域一个很重要的方面就来自风控管理,过去几年华为支持招行银行做风控系统,使得风控响应从分钟级变成了秒级,保护了招行32万亿资产的安全。

各行各业都在构建数据基础设施,加速数据价值的变现,整体来说,我们整体数据基础设施的架构分为这几层,计算资源、存储资源,数据处理资源,再往上一层是应用层,华为的服务构建在计算、存储、数据处理平台上。

因为华为是有全栈的解决方案,我们希望能够在智能时代重新构建、重新定义数据基础设施,计算侧由原来的x86 CPU、NPU为主的计算算力,变成多样化的算力。存储上也从原来烟囱式的存储变成大集中的存储,减少了数据的流动,数据处理上有数据库处理技术,有大数据处理技术,希望将这些技术融合贯通起来,减少数据的流动,使得我们数据挖掘的效率变得更高。

下面我介绍一下华为在安全可靠方面的几个关键进展:

第一,华为存储过去几年在市场上一直是领导者,中国市场一直保持领先地位。在存储系统方面,主要应用的芯片包括计算芯片、接口芯片、管理芯片,以及盘上的SSD控制芯片。目前,华为已量产了以上芯片。2014年,我们低端存储上实行了批量发货,今年全系列的中高端产品都应用了自研芯片,软件代码也是华为自研,但是整个存储系统遵循标准的协议,坚持与业界进行开放合作。

下面要着重介绍一下分布式数据库,华为希望打造一款世界级数据库。华为在去年开始对分布式数据库进行商业化,但研发实际上在2008年就开始启动了,目前已应用在华为30多个大型的解决方案中。

华为的数据库大概分为三款:

首先是,OLTP数据库,特点是故障恢复业内最快,还有OLAP数据库,大数据场景下经常用到,各行各业都会用这个并行的数据库的架构实现。再就是HTAP数据库,这是一个混合型数据库,是一个将图、关系、文本整合到一起的图形分布式数据库。

这三款数据库当中,OLTP数据库是政府和金融用户是比较关心的,因为这个直接关系到生产的安全,这一款数据库可以支持几种部署方式,第一个是单机和双机的部署,第二个是分布式部署,第三个是两地三中心部署,基本可以满足金融行业的诉求。

分享过去两年实际的商业案例:

在招商银行,通过这个高速数据库替换了原来的产品,包括信用卡的业务,包括手机帐单流水查询,都已经有实际应用了。

数据库核心的技术在于高可用性,华为分布式数据库在高可用上,结合了鲲鹏处理器硬件,使得分布式数据库节点之间的切换,由30秒级变为秒级切换,使得金融行业的用户在处理联机交易的时候,故障带来的影响更小,众所周知,双十一是我们联机交易量最大的时候,交易量是平常量的5到10倍。

金融整个控制体系,是通过一个漏斗形的控制体系来做的,最外侧有一层流控,中间还有流控,最后在喇叭口通过数据库的能力体现出来,数据库的能力有多高,那个喇叭口有多大。所以数据库对数据库的单机性能和稳定性是有要求的,过去出现过数据库不平稳的问题,会使得交易量急剧下降,因为会产生风暴式的影响,去年招行每秒交易一万一千次,这个量转换成硬件行业的同行量来看,大概是200万tpmC的水平,这是非常高的交易量。

第二个案例在运营商行业,数据库产品的业务驱动,有很多是来自运营商和金融行业,运营商在5G到来之后,5G使得我们话单量提升5到10倍,所有的IoT会产生计费,计费量会发生巨大变化,使得我们表结构变得很大。今年,山东移动做了一个全家福的战略,就是一套完全可控的能力开放中心,数据库,操作系统,到硬件全部可控。在山东移动的这个项目中,新系统实际承载了40%的业务,另外60%还在原来老系统,未来会逐步迁移过来,这个交易量是每秒三千次。

好,我的演讲就是这些,谢谢大家。