曙光邵宗有:大数据是HPC应用的又一片蓝海

蓝调 发表于:13年11月06日 14:19 [原创] DOIT.com.cn

  • 分享:
[导读]“Big Data is like teenage sex”,有人将大数据比作青少年对于性的认知,大家都在谈论大数据,却很少有人真正知道怎么去利用大数据。个人认为这个比喻尽管有些欠妥,但还是非常贴切了形容了当前大数据发展的状况。

截止到这次中国超级计算机Top100排行榜公布,曙光已经连续五届获得中国超级计算机Top100份额第一。但是,邵宗有表示,曙光从去年开始就 在逐步淡化排名,而是把大部分精力用于推动高性能计算机的应用。“传统高性能计算机市场竞争越来越激烈了,曙光过去两年一直在开辟高性能计算机的新市场, 比如云计算,曙光通过深圳(超级计算中心)来提供云计算服务。过去一年多,曙光找到了一个更大的市场——大数据”。

大数据在互联网、通信、金融、卫生、交通、安全等领域是非常重要的。邵宗有表示,中国现在大数据用得比较好的主要有几个领域:一是消费行为分析,比 如淘宝、银行、电信等都有消费行为的分析,做消费行为分析主要是为了两个目标,一是风险防控,二是精准营销;另一个叫社会行为分析,社会行为分析又分成舆 情和情报。

大数据挑战总结起来就是4个V(Volumn、velocity、Variety、Value),经过研究和分析认为高性能能计算机比较好的解决这 些问题。邵宗有谈道,这一两年以来,曙光高性能计算机的研发团队,主要在做高性能计算机与大数据的结合。今年上半年曙光推出了大数据一体机XData,把 高性能计算机的框架跟Map Reduce和hadoop框架融合在一起,实现一个完整的软件层,再加上底层高性能计算机、结构存储、网络。

我们知道,高性能计算机包括计算、存储、网络和软件四个主系统。大数据一体机和高性能计算机的通讯主系统和存储主系统基本没什么不同,只是在计算主 系统中,高性能计算机更多的是用超薄的刀片,大数据更多的是数据服务器,上层的软件主系统中,大数据一体机则是融合了高性能曙光Gridview和 Hadoop两个软件。“Map Reduce的模式将来会深刻影响到高性能计算机的应用,Map Reduce的高性能计算机用于大数据一体机就说明了Map Reduce是MPI的有效补充”,邵宗有补充说道。

事实上,对用户而言,缺的不是数据,也不是资金,而是大数据的视角,如何去应用大数据。“对曙光来说,就是要树立各个行业的“桥头堡”,推动大数据 在各个行业的应用,包括电信、银行等等,我们现在都在推动,”邵宗有在采访中表示,曙光还要做一个专业的团队去给用户提供服务。

据透露,目前,曙光现在正在研发一款数据存储与计算在一起的大机器,有望今年年底能完成。

[责任编辑:唐蓉]
蓝调
曙光信息产业股份有限公司副总裁沙超群表示,“这是一款可以用于高性能计算、云计算等应用场景的平台化产品。比如,如果放进去80个双路CPU节点,连上infiniband,这就是一个典型的HPC应用平台。如果放进去40个节点,再加上12块硬盘,这就是典型的互联网厂商所需要的Hadoop应用环境,就可以用于百度、阿里、腾讯等厂商的存储服务器”。
官方微信
weixin
精彩专题更多
存储风云榜”是由DOIT传媒主办的年度大型活动。回顾2014年,存储作为IT系统架构中最基础的元素,已经成为了推动信息产业发展的核心动力,存储产业的发展迈向成熟,数据经济的概念顺势而为的提出。
华为OceanStor V3系列存储系统是面向企业级应用的新一代统一存储产品。在功能、性能、效率、可靠性和易用性上都达到业界领先水平,很好的满足了大型数据库OLTP/OLAP、文件共享、云计算等各种应用下的数据存储需求。
联想携ThinkServer+System+七大行业解决方案惊艳第十六届高交会
 

公司简介 | 媒体优势 | 广告服务 | 客户寄语 | DOIT历程 | 诚聘英才 | 联系我们 | 会员注册 | 订阅中心

Copyright © 2013 DOIT Media, All rights Reserved. 北京楚科信息技术有限公司 版权所有.