云计算与大数据共舞 阿里云开发者盛宴

云计算是又一次概念包装的大水货,抑或另一颗点亮IT复兴的新星?

上世纪50年代,一些大型企业基于运营需求,又不能支付大型机的高昂成本,于是找到了共享CPU时间的方式,从一个跃点到下一个跃点的方法解决访问终端的问题,形成了最早的云计算雏形。紧接着,1969年ARPANET(世界互联网的雏形)的出现,开启了人类IT新视野,计算机的计算能力与数据处理能力开始成为人们共同研究的课题。

在接下来的几十年中,每隔几年都会有令人惊喜的计算机或者网络技术被人们利用,如网格计算、网络并行、虚拟化、web服务、Ajax等等全部被杂糅在一起,形成了我们今天看到的云计算模型。

在云计算的发展过程中,新技术的加入,使得原本不那么成功的模式焕发了青春,比如路途坎坷的SaaS、PaaS、IaaS等。

云计算和大数据,将是下一个时代的关键词。

大数据

IDC将大数据定义为更经济的从高频率获取的、大容量的、不同结构和类型的数据中获取价值而设计的新一代架构和技术。

大数据无处不在,每一条微博、每一张图片、每一段视频、每一张投票、每一句言论……都在产生越来越多数据;而企业级用户在拓展市场挖掘潜在用户的同时,也会借助海量数据进行决策分析。

人们过去习惯用有限的线索去关联一个群体事物,比如用身高或年龄划分人群,但实际上这是人们在过去缺少获取并存储信息的方式,只能选取一些比较显见的线索,而更重要的线索和信息隐藏在背后。

如果我们有能力以类似于全息影像这种方式去完整获取每个人的全部信息,我们将会发现,每个人之间会有无限的线索相关联,通过分析这些线索,会提供给我们意向不到的有价值的信息。这些基本信息,加上各种线索分析的维度、再加上最终的结果,这就是大数据。

在今天,随着移动互联网的迅猛发展,电子商务、企业CRM、ERP等等各种获取信息方式的增多,大数据把原来割裂的线索渐渐关联起来。大数据将看似两条平行线的个人消费市场和企业级市场潜移默化的联系在了一起,它将各行各业的用户、方案提供商、服务商、运营商以及整个生态链上游厂商,融入到一个大的环境中,越丰富详细的数据越能深挖出企业或个人最需要的信息。

而大数据的概念是离不开云计算的,正因为有了云计算的超强计算能力,大数据才显示出了他堪比黄金钻石的价值。

阿里云盛宴——云计算+大数据

随着互联网技术及行业的不断发展,越来越多复杂的互联网平台或应用架构产生,大规模数据的处理需求日益明显。阿里巴巴在提出做数据分享第一平台时,不仅仅是一个宏愿,而是基于阿里巴巴自身资源深思熟虑的,并且具有明确实现路径的目标。

一切围绕数据而来,这个思路让阿里云的行为更加清晰。阿里云的云计算建立在大规模分布式计算系统上,提供了开放数据存储OSS、关系型数据库RDS、开放结构化数据服务OTS和开放数据处理服务ODPS等,一系列云端的数据存储和计算服务。

不同于Amzon的云存储服务,阿里云拥有完全的自主知识产权的飞天内核,构建的存储与分析平台,实现国内真正的多服务器并行架构,可靠服务器与传输安全将数据的安全性大幅提高。在阿里云的数据中心,通过并行处理的应用程序、数据库、备份站点和处理器中不断存在的大量信息传送和转移,这将为平台提供大量的数据信息和计算能力,这也是整合云计算资源以后带来的强大动力。

其中,ODPS是从数据的获取迈向计算和数据处理的环节,提供大规模数据存储与数据分析,用户不仅可以使用ODPS平台上提供的数据模型工具与服务,也支持用户自己发布数据分析工具。ODPS平台一期暂时只提供大规模数据存储与离线数据分析服务,但是已经获得非常好的实际应用。

在阿里内部,阿里金融依靠企业经营数据和现金流的风险管理技术,为超过13万家小微企业、个人创业者提供融资服务。2012年上半年,阿里金融的小额贷款业务共投放贷款130亿元,在这背后,是基于阿里巴巴电子商务平台上的数据和阿里云云计算平台对数据处理和分析的支撑。

在外部,施耐德REM远程能源管理平台利用阿里云弹性计算的优势,通过智能电表加网关的模式采集客户用能数据,并远程集中存储在OTS中,使用 ODPS进行计算,向企业提供用能统计、用能分析,能耗报警、能源建模及节能咨询等远程能源管理服务,利用能源即服务(EaaS)的新型能源管理服务模式,降低客户初始投资,提高能源使用效率,实现节能减排的目标。

而另一家成功启用阿里云的马克威(天律),基于阿里云资源及计算平台,推出集统计分析、数据挖掘和商务智能于一体的云服务平台,提供数据采集,数据分析与决策支持系统。用友软件也和阿里云开展全面合作,将有超过百万的企业级用户迁移到云平台上。

云计算满足了企业对海量数据的低成本、高效处理,实现了不同类型数据的大量存储与海量计算,协助企业对数据价值进行挖掘与分析。上述企业对阿里云的成功应用,将个人、电子商务和企业级市场贯通在一起,初步展现了云计算和大数据的魅力,是一个前所未有的广大市场。

在11月9日的阿里云开发者大会上,“大数据与大规模计算专场”将通过阿里云海量数据处理服务的介绍以及在不同领域的运用,展现云计算强大的数据处理能力,以及大数据的价值,这也将在更多人面前打开云计算与大数据时代的大门。