英特尔发布Hadoop旨在推动行业发展

日前英特尔在北京召开“芯动大数据智领大机遇”论坛,会上有来自IDC的专家对大数据市场的发展做了前景分享,也有来自海康威视、中国联通研究院的用户分享了英特尔Hadoop的使用体验和感受。来自英特尔亚太研发公司的总经理何京翔博士也就英特尔在大数据方面的策略发表了自己的看法。

周振刚先生是IDC中国企业级系统与软件研究部高级研究经理,他表示:IDC对大数据的定义是四个“V”:高容量的数据、数据类型多样化、持续性不断刷新的数据,以及为用户带来最终的价值。

据介绍,IDC认为大数据在市场上的影响主要有四个层面:IT基础架构层面、数据的组织和管理、更上层的数据组织、数据分析和挖掘。而基于这四个层面的市场,将会有多大呢? IDC预计2015年整个市场将超过170亿美元,平均增长速度每年超过50%。

英特尔发布Hadoop意在扶持大数据生态

此外,本次大数据论坛上最重要的是英特尔推出了自己的Hadoop发行版。何京翔博士就此进行了重点介绍,他表示,该发行版是通过英特尔中国亚洲研发中心的团队进行研发,由于中国的国情,中国将成为全球最重要的大数据市场之一,此次推出的Hadoop发行版,将首先定位在中国,满足具有代表性的中国客户和市场需求,然后通过英特尔的市场先机和技术优势,推广至全球市场,从而应对大数据挑战。

英特尔发布Hadoop旨在推动行业发展

何京翔表示,中国市场上有很好的机遇。2012年6月的数据显示,中国有将近3.9亿的移动客户、5.3亿的互联网客户,市场的推动和政府的推动,在一个比较典型的智能城市的应用中,每个季度就可能产生出200PB的视频数据,一个笔记本电脑假如是200G,就是一百万个笔记本所能够存储的数据,这就是200PB的概念。未来的医疗档案也会产生海量的数据。所有这些数据不能用传统方法处理,需要有新的思考、新的作为。

何博士认为,此次推出Hadoop发行版,只是为了开拓市场抓住商机,长期来看,还是致力于打造健康的生态系统,通过ISV、OEM等众多合作伙伴,共同应对大数据带来的挑战,把握时代机遇,利用大数据深挖价值。英特尔Hadoop发行版是一套解决方案,针对不同行业客户进行系统整合,根据不同用户的需求来实现个性化解决方案。

据介绍,以至强处理器构建的高效IT基础设施为基石,英特尔还计划在其上的数据组织与管理层,针对大数据的分发和管理需求提供针对英特尔平台优化的 Hadoop产品和服务;在分析与发现层,提供针对客户端与服务器端算法开发的支持,以满足大数据计算所需的性能与规模要求;在决策支持与IT服务层,则将联合生态系统内的合作伙伴,提供更为优化的可视化应用体验。英特尔所有与这些规划相关的具体策略,将随着大数据技术、应用和市场的发展逐步深化、细化。

在会后的采访中,ZDNet记者问到何博士英特尔有没有打算也成立一个类似ODCA(开放数据中心联盟)这样的组织,来将大数据的用户统一起来(例如BDA)。何博士表示,ODCA是经他手慢慢打造起来的,而这个组织之所以没有叫做开放式云计算联盟,就是考虑到云计算和大数据两方面的用户,因此 ODCA开放数据中心联盟是同时适用于云计算和大数据用户的联盟。他们的需求可以提交到ODCA联盟,也可以由联盟帮助找到合适的解决方案。

英特尔发布Hadoop旨在推动行业发展

海康威视的蒋总则表示,安防监控行业发展有自身的局限性,主要还是数据规模太大。虽然有很多算法上的优化在压缩数据,但是对于类似“智慧城市”这样的安防来说,还需要对视频做分析,这就需要再解压数据——而分析这类数据就是大数据的核心价值。海康威视采用英特尔Hadoop发行版的目的有两点,一是自身去操作开源Hadoop在技术和时间上都有难度,第二是有英特尔的调优,Hadoo会运行的更加高效。

记者了解到,目前海康威视和中国联通使用英特尔Hadoop发行版主要还是用于索引和搜索,更深层次的功能还没有用到,而实际使用瓶颈也一般在索引和搜索上。