2017中国存储峰会上,一场关于对象存储的对话在国内外对象存储专家之间展开,对象存储不是新东西,十几年近二十多年的过程中经历了多个发展阶段,最早用在超算系统中,2000年以后用作归档存储,代表厂商有EMC和HDS,再后来互联网兴起带动了对象存储,现在越来越多的企业级存储服务商开始布局对象存储,看中了对象存储在企业内的发展前景。
本次对话邀请到的四位专家分别是(顺序按照专家姓首写字母顺序排列):紫光西部数据CTO 陈炜,奥思数据解决方案总监 李锋,XSKY 产品营销总监 吕磊,IBM 软件定义解决方案大中华区销售经理 周立旸。
四位国内外对象存储领域真正的专家,作为特邀嘉宾参与了此次对话,专家们客观地从用户实际痛点,对象存储的利弊以及行业实践经验出发,在对话中呈现对象存储的方方面面,对话内容可以作为大家了解企业对象存储的学习资料。
在将近一个小时的对话过程中,四位专家争相解答对象存储的诸多问题。话题分为三个部分,第一部分是挖掘对象存储的实际需求,第二部分是企业怎么用对象存储,第三部分是集中讨论对象存储能为用户,为服务商带来的发展价值。
Part1:为什么现在聊对象存储?
Q:在当天对话中,第一个话题就是:为什么是现在这个时间点上来谈对象存储?
紫光西部数据CTO 陈炜(以下简称陈炜)认为原因在于两方面:一方面是因为企业数据量增长的速度非常快,另一方面是因为应用的新发展。数据增长这点毋庸置疑,陈炜重点从应用方面给出了解答。
对企业来说数据一直都在,只是以前没有能处理这些数据的应用,现在随着大数据的发展,有数据处理能力的应用越来越多。不仅如此,这些应用经过互联网企业的使用如今越发成熟,越来越多的企业也希望能够从原来完全用不到的数据或者存不下来的数据里面挖掘价值。
企业开始上云,应用形态发生了变化,云应用越来越普遍,相对应还要有持续集成、持续开发、持续测试的环境,原来的应用要求数据紧耦合,现在的应用要求数据松耦合,新的应用形态对存储应用提出新需求,而对象存储正好是答案。
IBM 软件定义解决方案大中华区销售经理周立旸(以下简称周立旸)从企业应用对数据的要求方面做出补充。
他表示,企业不仅需要有一个地方存这些数据,更希望把这些数据变成资源用起来,然而传统的数据以多方方式分散在系统里,如果想让数据变成企业资源就需要一个数据资源池,把很多趟在角落里面的冷数据变成随时能访问到的温的数据,半热的数据,要求数据随时可以存,随时可以用。
对象存储可以保证这数据随时可以访问,随时可以用,所以就得到了越来越多的重视,也被越来越多的企业采用。
XSKY 产品营销总监吕磊(以下简称吕磊)更强调了互联网技术带动了对象存储的发展。他表示,在当今数据爆炸的时代数据已经成为最核心的生产资料,计算是生产力,而互联网是生产关系。数据是整个互联网的基石,对象存储焕发生命的第二春是互联网带动的,因为跟互联网的紧结合,使得对象存储的关注度越来越高。
而整体硬件技术CPU,SSD,内存的快速发展,带动了分布式存储,所以基于分布式的对象存储也获得了新的发展,这也是对象存储焕发了新的生命力的第二个原因。
Q:新事物的出现发展和兴起必然会对原有的事物带来冲击和挑战,那么对象存储来了,谁家欢喜谁家愁呢?
陈炜从客户的角度出发,提出需要从投资回报和实际应用价值两方面来考虑。
他表示,从客户的角度来看,有喜有忧,客户面对新的存储方案考虑到底换还是不换,换了又要花一大笔钱,不换又怕落后。
用户喜的是能意识到对象存储的价值所在,实际落地又需要面对各种部署,实施和改造问题,陈炜谈的问题反映了许多用户的心理状态。
奥思数据解决方案总监李锋(以下简称李锋)从服务商的角度给出解答,他表示非常看好对象存储市场的未来发展。他说到,做对象存储业务的人自然欢喜大于忧愁,IT的技术不断革新,用户不断尝试新技术,这些用户经历的太多了,许多人都在摸索中前进,我相信对象存储未来会成为巨大的市场,但也有人不信,对象存储的市场发展也将会是优胜劣汰的过程,对我们来说最重要的是做出自己的价值。
周立旸则从生态系统层面(应用供应商,用户和存储供应商)完整分析了对象存储相关者的喜与忧。随着对象存储的应用和接受度越来越高,现在没有或者不支持对象存储的技术供应商会比较愁。供应商和用户对于对象存储带来的好处绝对是欢喜,因为用户体验到了更低成本管理海量数据的方式,对应用供应商来说,标准的数据访问方式使应用有更多数据可用,是应用能够部署在更多业务环境里面。对存储供应商来说这意味着巨大的市场机遇,未来会有更多非结构化数据存储在对象存储的平台上,供应商应该努力把自己的技术和生态系统做好,在新增长的市场里面获得更多业务。
吕磊表示谁家欢喜谁家忧的说法其实并不合适。从厂商的角度来看,做分布式存储的厂商基本都支持对象存储,大家不可能对这块市场视而不见, 都会积极参与和拥抱这块市场,所以说不上有几家愁,因为大家都在做这个市场;但从用户的角度看,对象存储技术对现有存储技术并不是彻底的替代关系,解决用户的问题,适合用户的场景,找到适合用户的方案,才是最好的方案,没有绝对的喜和忧。企业级产品和消费电子不太一样,因为它管理用户最核心的数据,用户关注的是要贴近场景做的解决方案,这肯定是一个共存的生态,并不是新技术来了一定要把旧技术拍到沙滩上,每个技术都有适合自己适用的场景。
Q:哪些企业具备哪些条件之后应该上对象存储?用户都在谈云,公有云,私有云,混合云上对象存储有什么不同呢?
周立旸介绍了用对象存储的三个理由,以及用户在公有云,私有云,混合云环境下用户的对象存储需求。
用户愿意用对象存储的场景可以分三类,也就是用户上对象存储的三个原因:
第一类,数据驱动。当数据量、文件数量大到一定程度后,传统方式无论是经济性还是效率方面都会有问题,需要换一种处理方式。
第二种,应用驱动,互联网+和数字化转型时代有很多云原生应用,传统的存储方式需要做很多转换层的工作,导致软件开发复杂。
第三,可用性或者可靠性驱动。数据保护方式有各种各样,但都是面向结构化数据的,当面向海量的非结构化数据的时候就会有问题,需要做出改变,
这三个方面都是企业选择对象存储的切入点。不过,在混合环境下这三点会有所变化。
有些企业要考虑私有云部署对象存储的方式,那么把传统数据架构转过来的时候,就要考虑如何保证数据的安全性合规性,客户对这方面要求比较集中。一些用了公有云的客户会对成本、可扩展性比较关注。但无论私有云还是公有云,很多流程都会聚在一起,到一定程度就会需要混合架构,这时用户还要考虑在多云环境里面做统一的数据管理。
陈炜做出补充表示:混合云用户要不要上对象存储,还要考虑兼容性问题,新应用要适应,老的应用也要照顾。企业需要一个上云的可靠方案,如果用的不行还能从云上下来,能够自由上下的一条通路。
Part2
Q:对象存储对企业用户来说毕竟还是新鲜事物,如何一步步上云呢?
李锋表示,对象存储与其他存储没有什么不同,准备好硬件,把对象存储的集群软件装上去就可以,不过有几个地方要关注:
第一个,应用兼容性问题,第二个就是安全的问题,第三就是运维的问题。前两个问题是主要是技术方案本身的问题,第三个问题关系用户实际使用。系统的可运维性如何,如果不好的话可能会耗费很大精力。另外一个技术问题是,此前的备份方案都是基于小数据做的,如果数据量比较大了,备份怎么办,是否还要复制一份数据呢?
周立旸表示,有时候需要帮用对象存储的客户规划一下未来。解决一个问题可能有多种方案,现在客户遇到一个问题,可以用对象存储,也可以用替代方案,客户还要一个未来业务发展的方向,未来希望跑的应用是什么,这就需要通过一些应用项目来选择一个更符合未来架构的技术。
有的企业自认为不是数据驱动型企业,解决某些问题会有别的方式,但有的企业认为未来有数据驱动型业务,选择的时候就会有方向,这样无论是处于第几步,私有云、公有云还是混合云,最后会形成所希望的数据架构。
陈炜表示,企业对象存储的路径应该是一个持续集成的过程,分步骤考虑上对象存储的路径,应该先考虑数据,后考虑应用。
数据驱动下,数据是企业最核心的价值,所以,一方面要做数据的迁移,另一方面还要保证业务数据始终在线。这要求每一步都有详细的计划,要做数据迁移,首先要把数据集中起来,先把新应用的数据集中起来,传统应用可能需要通过一些接口逐渐集中,最后形成数据的资源池,这些数据在私有云、公有云、还是混合云都要做规划,第一步是数据的规划和迁移,这一过程是一个持续集成的过程。
随后是应用的迁移,很多企业没有意识到把数据放入对象存储的价值,成本可能变化不大,对象存储的真正价值还在于各种各样的先进性功能,比如如何把元数据丰富化,如何进行实时检索,为了用到这些功能,应用就不能通过一个简单的网关来实现。先数据,后应用,简而言之,这是一个持续集成的过程。
吕磊表示,对象存储首先还是存储,所有前期的步骤与传统存储没有太大分别,但它有独特性,对象存储的架构要有一个整体的考虑,未来三年五年的扩容,数据安全,数据上云,如何跟大数据或者AI做对接。这就是对象存储和传统存储最大的区别:在项目的最初阶段就要有一个自上而下的整体统筹规划
从大家的回答来看,专家都认为上对象存储之前需要考虑很多因素,需要做全局性的规划,可以有步骤的,持续性的推进上对象存储的过程。
Q:以上说了很多对象存储的优势和实施的方式,那么对象存储就没有什么不好的吗?一直以来一家全球领先的公有云服务商的对象存储陆陆续续曝出多起数据泄露消息,不禁让人为公有云的对象存储安全隐私担忧,除此之外,对象存储还有那些不足和缺点应该告诉用户或者准用户呢?
吕磊认为,存储最应该关注的是存储自身数据的安全性问题,数据安全是第一要素,这是从存储角度进行的考虑。而在存储数据安全之上是网络的安全,这两部分是完全两个层面的问题。现在很多用户坚持使用私有云或者混合云架构的一个原因就是因为公有云有数据泄漏的可能。这其实如上所述是两个层面的数据安全问题。存储做好存储数据级别的安全,网络级别的安全应该是网络产品要考虑的问题。
制约对象存储发展的一点是:对象存储对比传统存储其接口相对单一,用户端需要做适配对接的二次开发,很多用户没有这个开发能力去改变自己的IT架构去和对象存储对接。如何帮助用户解决对象存储到用户最一公里的问题,是现在制约对象存储无法大规模爆发的一个主要原因。但是我欣然看到对象存储的各个厂商都在一起在努力培育这块市场。为了解决这一问题,XSKY特别提供了针对对象存储的NFS接口,可适配S3,帮助用户通过NFS接口来对接S3,实现了用户使用环境从NAS向对象的一个平滑切换
周立旸总结了企业上对象存储的三个障碍。
首先,对象存储像粗重的玄铁而不是绣花针,与传统存储的适应场景不同。对象存储多用作第二存储,与主存储如何对接,如何与其他存储搭配使用都需要一些做法来实现。
其次,对象存储在小容量数据下并不一定比别的方案省钱,如果考虑未来发展需要从成本层面做精细的考量。
第三,对象存储的管理与传统的存储不一样,企业引进新东西需要经过管控体系,预算问题,也要考虑怎么样把新形势的存储架构纳入到整个企业的数据治理的范畴内。这需要技术层面和管理流程的工作。这三点可能是对象存储会面临的挑战。
李锋也强调,对象存储并不能替代传统存储,对象存储有特有的、典型的应用场景。类似公有云对象存储丢数据的安全问题时有发生,但不能以此就否定公有云。
周立旸的一番话打消了笔者对对象存储不安全的印象,反而觉得对象存储更安全了。他说道,公有云对象存储泄露数据可能是管控方面的问题,从某种程度上讲对象存储比传统存储更安全,因为对象存储是以跨站点数据切片的方式保存数据,这样即使部分主机泄密,其他数据仍可以是安全的,对象存储有一些比传统存储更安全性的地方。
PART3:部署对象存储之后
Q:部署对象存储对企业来说能带来哪些优势,对企业的IT转型和业务转型带来什么?
陈炜表示,对象存储使得存储扩展性,弹性部署能力,数据处理能力大幅度提高,因为对象存储和大数据、人工智能等应用紧密结合,部署对象存储后,即使是原来存下来用不了的数据现在也能处理。
紫光西部数据的对象存储技术已经成功应用在视频监控行业,如果客户把人工智能机器视觉的技术应用在大型的视频监控场景时,紫光西部数据在对象存储积累的经验能为这类新的数据型应用带来额外价值。
周立旸:对象存储首先可以简化数据管理,IBM的一些国外客户的对象存储上有150个PB的数据,但整体成本(包括人员成本,存储成本上)都是极大节省。业务部门能从对象存储收获更大价值,简而言之就是能盘活数据,把非结构化数据都变成活的,是对象存储给企业带来的最大优势。
吕磊也表示,流水不腐,户枢不蠹,让数据流动起来才能给用户带来额外的价值,分布式架构的易扩展性,易管理性,都为数据流动带来了便捷性。很多用户希望IT部门实现业务转型,对象存储跟互联网的紧密结合的关系可帮用户实现这一转型。
李锋以奥斯数据的实际案例强调了对象存储在管理方面的优势。李峰介绍说,奥斯数据的一个国家总局级用户有遍布省、市、县的很多数据,过去每个地方都的数据都碎片化,数据管理相当混乱,在对象存储跨地域性的帮助下用户建一个全国性的资源池,解决了之前架构无法解决的问题。
LastQ:展望一下对象存储的发展前景。
这四位嘉宾非常积极地参与者此次对话,都是因为大家看到了对象存储市场的未来发展前景,对于未来市场,大家是这么看的。
周立旸结合项目参与经验给出回答。他表示,过去一年多做了很多对象存储项目,看到很多用户正在采用新技术,比如做医疗健康大数据的用户有大量增长的非结构化的数据,主要存放人的基因数据,一个成品就是十几个G的数据,如果要保存过程数据数据量更多,中国有十几亿人口,未来医疗健康的发展,未来大家可能验血后就会得到自己的基因数据。
未来需要把更多数据变成活数据,他认为对象存储会成为所有非结构化数据资源池最主要的平台。
陈炜认为,对象存储发展最成熟的应该在互联网,互联网公司都在用对象存储,因为数据多,应用越发成熟,成熟的应用会向更多场景延展出去。
互联网以外的视频监控场景有大量数据,紫光西部数据的对象存储在视频监控领域有许多成功案例。面对广电行业的场景需求,陈炜认为需要从产品方案上作出一些创新的方案,比如不能只靠标准接口来挖掘数据价值,要思考用标准接口与其他接口结合。
吕磊表示,我们先回顾一下对象存储的历史,中国最大的对象存储应用在互联网,是因为海量的非结构化数据主要集中在互联网,而现在私有云的非结构化数据也逐步的增多,这个问题是绕不过去的,必然会参考互联网的成功经验,所以未来对象存储的需求在私有云的架构下会越来越多
比如:广电行业有大量非结构化媒资数据的存储需求,XSKY在贵州广电项目中实现了单池10PB+的数据量;传统制造业因为工业4.0、智能制造的发展也产生了大量的非结构化数据,XSKY的对象存储帮助某大型生产制造上市企业实现了生产流水线的智能制造;同样在交通运输行业也出现了大量的非结构化数据,XSKY的对象存储帮助厦门航空搭建了跨部门的云平台……
以上这些都表明:对象存储已经到了爆发的时间点,因为确实能看到非结构化数据呈现一个井喷试的增长。
李锋最后也认为,对象存储的发展前景是非常光明的。