2014年热点:大数据带来的机遇与挑战

中国的信息化工作已经开展了将近二十年的时间,发展到今天确实对工业生产和国民经济建设起到了积极作用,尤其是企业带头的信息化建设,使得中国企业快速走向国际化和全球化。但是,今天的科技飞速发展,云计算、大数据、移动互联网与社交网络的出现使得数据以几何级次上升,过去的存储模式和IT架构都受到了严峻的挑战,大数据带来的问题主要表现在以下几个方面:

第一是大家经常谈到的大数据其实它的价值是很难评估的,或者说是“价值密度比较低”。我们会发现,散布在论坛或者即时通讯中的记录,或许几个TB的数据,都没有多少有价值的信息。如何在这么大量的数据里面淘这些仅仅的一点点的价值?对你成本的付出是否值得,需要大家来思考。

第二是数据的多样性导致如何对这些数据做关联,做分析?我们知道大数据的特点就是非结构化数据比较多,如何在面对不同的数据类型中通过交叉分析技术去找到关联?才是大数据的核心技术之一。

第三是速度。一秒是临界点,我觉得一秒可能对于某些环节来讲都长,实时处理的要求是大数据区别于传统数据仓库技术这种关键性技术之一。如果对于大数据的分析、大数据的利用时间过长的话,就失去了这种价值的机会。

第四是数据量问题。如果说想从大数据里得到你所应用的价值,就需要非常大的数据量。因此,我们在大数据使用里面非常像淘金,数据量的大小决定你是否获取到有用信息的基础和关键。

那么大数据是不是云计算?其实大数据与云计算具有不可分割性,但它不仅仅是云计算的问题。大数据比云计算更为落地,它与实际工作、获取价值的路径更短,使用起来更加方便。大数据比云计算,具有数据的更加复杂性。云计算生成的数据处理不了,还需要通过大数据的技术来处理,当然处理大数据的技术也需要云计算的能力。

软件是大数据的引擎。以前我们是把数据带入软件,现在是把软件带入数据。以前传输的过程是更新数据,不更新软件,只是把数据做完就行。以前也在说,信息化最重要的是信息,什么信息呢?数据。觉得软件不主要,数据最主要。从大数据来讲,软件和数据是同等重要的。数据放在那块是死的,软件才使得大数据变成活灵活现的价值。所以说,在大数据面前我们创新的是什么?第一个创新的就是软件,第二个创新的才是应用。当然了,有的人说“需求带动发展”这也是可以的,但是如果没有对大数据综合分析处理的软件,那么大数据的实施是不可能的。因此,在大数据的过程中一定要有软件的支撑,软件是大数据的引擎。

接下来再谈谈大数据对传统IT架构的影响。经过大数据改造的IT,大家可以看到,大数据对企业带来这么大的机遇,这种IT系统也不单单是我们所说的硬件+软件。IT系统一般是买计算机、装系统,完了之后就说数据很重要。IT系统原来就分为三层:硬件、软件、数据。现在不是这样了,现在硬件和软件分不开了,软件和数据也分不开了,所以说现在的IT系统还是硬件、软件+数据的模式,已经不对了,因为硬件、软件、数据合一了,你分不出来了,你不可能把软件和数据再进行重新分离了,因为分离之后,价值就不存在了。所以行业大数据固然重要,跨行业交叉分析会带来新的市场,将催生新的应用领域,将会产生新的产业模式和生态。

那么大数据如何演进呢?我们觉得在未来的互联网时代,硬件、软件等企业未来都将向数据靠拢。硬件企业基于速度的改变将会向硬件嵌入式软件改变,硬件除了处理结构化数据之外还会嵌入一些非结构化处理平台予以销售。单纯销售硬件,未来将不是热点。软件将会出现分离状态,什么是分离状态?就是单纯的操作平台市场会逐步降低,基于开源性微操作系统以及针对不同数据状态的操作系统将会出现,微软一统桌面的形式将不复存在。除了台式电脑以外,其他的桌面系统微软占的比例将会越来越小,更多的行业将会对数据、特别是大数据产生依赖,特别是公共服务行业以及基于离散制造行业或者过程控制的企业依据大数据去改善自己的生产流程、控制流程将会成为重点。IT投资重心也将会从结构化数据向非结构化数据演变,也将会从硬件、软件到数据库的建设,最早我们说硬件投资,后来又说软件,最后又说数据中心,这个投资逐步向数据处理和运营的产业转变。