Doserv 发表于:13年11月27日 16:35 [综述] DOIT.com.cn
近日,大数据和分析领域的全球领导厂商IBM(NYSE:IBM)在上海向广大中国客户展示了当今最佳的企业级大数据和分析基础架构平台——IBM Power Systems,以及Power平台上全面覆盖各种复杂行业应用场景的企业级大数据和分析应用解决方案。Power Systems的大数据和分析解决方案全面涵盖大数据和分析的各个场景,如静态批量大数据处理、实时大数据处理、数据仓库整合和数据集市构建等,并集IBM全面的咨询、服务、软硬件能力于一体,能够有效帮助金融、电信、政府、公共事业、能源、交通、制造等行业企业快速步入大数据时代,开启大数据和分析业务,有效管理和利用海量数据,以获取商业洞察和行业竞争优势。数百位中国企业客户代表近距离体验了上述解决方案的领先优势,并出席了主题为“驭数有术,智胜大数据”的“2013 Power开启大数据业务高峰论坛”。
大数据应用向传统行业拓展 企业级需求凸显
根据IBM商业价值研究院的市场调研显示,尽管非常重视数据价值,但目前全球大部分企业依然表现出缺少洞察力、数据访问效率低下、预见能力不足,以及数据准确度低等问题,这些企业急需能够有效利用数据资源的综合解决方案以摆脱现状。IDC预测,在未来的几年中,大数据和分析市场将获得快速发展,以中国为例,中国大数据技术与服务市场将会从2011年的7760万美元快速增长到2016年的6.16亿美元,相当于每年51.4%的平均增幅。
传统的针对结构化数据的分析应用基于数据库和数据仓库,在金融、电信等行业有着广泛应用,例如电信的经分系统。近两年,针对非结构化数据的大数据应用呈现快速增长态势,从行业角度看,大数据正在从电子商务、互联网、快消等行业向传统的金融、政府、公共事业、能源、交通等行业快速扩展;在应用场景方面,大数据应用已经从用户上网行为分析拓展到电力安全监控、舆情监测等关键领域。
IBM认为,首先,随着大数据和分析在企业应用的深入,对大数据和分析平台的企业级可靠性、稳定性、安全性要求会越来越高;第二,大多数企业级用户都面对着极为复杂的行业应用场景,不同类型和来源的数据需要统一地被利用,特别是新的大数据方案如何与传统的数据仓库无缝集成;第三,大多数企业级客户还处于对大数据和分析的探索初期,他们十分需要拥有行业经验,又有大数据领域相关产品和技术能力的供应商作为合作伙伴。IBM认为企业客户需要企业级的、全面的大数据和分析解决方案,并且还要有深厚的行业经验支持。而在这些方面,IBM Power都为企业级大数据和分析应用基础架构平台提供了更好的选择。
蓝色大象厚积薄发 数据时代舞姿翩翩
IBM是业界唯一集咨询、服务、软硬件等综合能力于一体的厂商,在全球拥有3万多个大数据和分析应用客户,是大数据和分析领域的绝对领导者。30多笔与分析相关的收购,400多位顶尖数学家,9000多名业务分析顾问,使IBM能够提供业界最完整的企业级大数据和分析解决方案,针对企业级大数据和分析应用的不同场景,全面满足企业级客户对大数据和分析的需求。
在硬件方面,Power在企业级大数据和分析领域应用最早、最广泛,金融、电信等行业的大部分数据库、数据仓库和分析解决方案都基于Power平台。POWER7+芯片本身的多线程、高吞吐特点说明其就是为大数据应用而设计的企业级系统。即将于2014年发布的POWER8又将把Power平台处理大数据和分析工作负载的能力进一步大幅提升。当今最顶级的大数据和分析系统沃森就是基于Power平台的。
在软件方面,IBM一直以来都通过强劲的收购和创新的研发策略加强在大数据分析领域的领先优势,自2000年以来,在IBM收购的近百家公司中,大数据和分析领域的收购超过35家。到目前为止,IBM在分析软件收购方面已经投入了超过160亿美金,而这一数字仍在不断增长中。IBM每年在大数据和分析领域研发上的投入也高达40亿美元。仅2012年,IBM就在大数据领域获得了近500项专利。
在服务方面,凭借多年端到端服务于企业级客户的经验积累,IBM的大数据实践已经深入到包括中国在内的全球市场的各个行业,包括电信、金融、医疗、零售、制造等众多客户已在IBM大数据平台及大数据分析等技术和理念支持下获得收益。
Power构建全面、高效的企业级大数据和分析平台
IBM系统与科技部大中华区Power Systems总经理侯淼表示:“IBM Power大数据和分析应用平台凭借业界领先的性能、企业级的可靠性/安全性、强大的扩展能力(Scale Up & Scale Out),以及全面的行业应用场景覆盖和深厚的行业洞察积累,无疑是当前最佳大数据和分析平台的不二之选。目前,基于IBM Power平台的大数据实践已经深入到包括中国在内的全球市场的各个行业,包括电信、金融、医疗、零售、制造等众多客户已经在IBM Power大数据平台及大数据分析等技术的支持下获益。”
数据资源是当今公认的新型“石油”,但需要充分的提炼才能真正服务于企业,并实现商业价值。IBM认为不同的大数据类型需要不同的数据“提炼”方式,在IBM Power平台上拥有针对静态批量大数据处理、实时大数据处理、数据仓库整合,以及数据集市构建的全面解决方案。面对要求迥异的应用场景,IBM Power家族的两条子产品线将各展所长。天合大数据服务器(PowerLinux)凭借优秀的横向扩展性主要运行静态和实时大数据应用;而PowerAIX则倚重强大的企业级优势承载数据仓库整合和数据集市构建等工作负载。
Power静态大数据解决方案:Power支持Open Hadoop/ BigInsights/ Symphony等大数据解决方案,并能够与传统数据仓库系统无缝集成;天合大数据服务器(PowerLinux)/GPFS-FPO/Symphony相对x86方案拥有巨大的性能优势;
Power实时大数据处理解决方案:Power支持IBM Infosphere Streams和开源的Storm构建流计算解决方案;天合大数据服务器(PowerLinux)/GPFS-FPO/Streams实现了业界最为强大的实时数据处理功能和性能;
Power数据仓库整合解决方案:长久以来,Power集中式架构是企业级用户构建数据库、数据仓库的首选,在各行业被广泛应用;DB2 PureScale实现对Power集中式架构的进一步增强;Power基于DB2 BCU构建起强大的Scale-Out架构数据仓库,以及基于Power低端服务器的创新解决方案;
Power数据集市构建解决方案:DB2 BLU内存列式数据库带来数据管理的革命性转折点,实现了数据查询的革命性进步;专门针对Power Systems进行优化,以充分发挥Power独有的特性,报告和分析快8-25倍,以及10倍的存储空间节省。
沃森,当今大数据和分析应用的标杆
一周前,IBM在纽约宣布有史以来首次将Watson开发平台技术用于云环境中,并向创业软件应用提供商的全球社区开放Watson认知计算平台,此举旨在鼓励创新并助力形成创业软件应用提供商的全新生态系统,从初创公司与风险资本支持的企业到老牌企业都可以参与相关的App开发。这些业务伙伴与IBM的共同愿景是,创建一类新的认知应用,转变企业与消费者的决策方式。
沃森是IBM在大数据时代里程碑式的成就,是当今业界最顶级的大数据和分析系统。两年前,Watson在的电视智力竞赛节目《Jeopardy》中战胜人类选手而一举成名,同时宣布认知计算时代的到来,这也标志着IBM在大数据和分析领域已经迈上了一个全新的台阶。
作为认知计算的杰出代表,目前,IBM沃森技术已经被应用于医疗、金融和客户服务等领域,以其更加智能、精准的大数据和分析能力,降低误诊、拯救生命和提升客户体验。例如,在医疗领域,IBM正通过Watson与史隆-凯特林癌症研究中心(Memorial Sloan-Kettering)进行合作。迄今为止,Watson已收录了肿瘤学研究领域的42种医学期刊、临床试验的60多万条医疗证据和200万页文本资料。Watson能够在几秒之内筛选数十年癌症治疗历史中的150万份患者记录,包括病历和患者治疗结果,并为医生提供可供选择的循证治疗方案。
沃森的商用实践预示了认知计算广阔的行业应用前景。未来,认知计算在人类生活的各个方面都将带来根本性的改变。例如,在实时金融风险控制领域,认知计算技术可以让人们实现秒级的风险检测与防范;在癌症治疗领域,目前需要一个月或更长时间才能制定出针对性的药物治疗方案,而认知计算技术则可以把这个周期缩短至一天,这将极大地提高癌症患者的治愈率;在教育领域,认知计算通过实时分析技术,为学习者制定个性化的教育计划并及时评估学习效果,以此优化教育方案,提高教育质量和效率。
日前,IBM又推出了全新的Watson版本——Watson Engagement Advisor,该版本首度将大数据分析与IBM智慧商务的核心思想进行融合,全新的Watson能够基于海量的知识库储备,帮助企业客服人员迅速提供回复,直接通过云端运送服务、在线聊天或移动设备送达客户。通过一次简单的点击,“Ask Watson”应用就能够快速地解决客户的问题,发送反馈或排除故障了。
IBM对Power和大数据市场的长期承诺:持续投入+开源策略
在大数据和分析应用迅速发展的今天,IBM将为基于Power平台的大数据和分析应用解决方案开发提供持续的投入,并对此有着长期的承诺。
IBM将对Power平台硬件创新进行持续的投入,确保提供最佳的大数据和分析平台。Power平台相对x86系统拥有更加适合大数据和分析应用的特征。IBM天合大数据服务器(PowerLinux)继承了Power家族的企业级RAS特性,并与开源操作系统完美结合,卓越的虚拟化能力和极致的安全性,使其成为构建企业级大数据和分析应用的最佳选择。日前,中国移动某省分公司宣布其CDR清单查询系统采用PowerLinux + Platform Symphony(Symphony是IBM提供的商业化Map/Reduce软件),获得比友商每核加载性能高8.46倍的佳绩。
开源是Power平台的长期战略,IBM通过对开放的支持,丰富Power平台上的大数据和分析应用,构建完善的大数据生态系统。多年来,IBM的投入有力地帮助Linux逐渐被全球各地的企业客户所接受,使Linux成为今天主流的企业级操作系统。今年9月,IBM宣布再次投入10亿美金用于Linux,并且专门用于PowerLinux的发展。IBM对开源的支持将有力地帮助更多大数据解决方案的落地。
IBM吸取开源大数据技术的优势,为企业级客户提供兼具开源特征与企业级优势的大数据和分析解决方案,IBM Biginsights(商业版本的Hadoop)比开源版本性能高8倍之多。
作为IBM PowerLinux大数据和分析平台的重要合作伙伴,北京信合运通科技有限公司已在国内帮助十多家电信运营商完成了大数据和分析项目的实施,是电信行业最领先的独立软件开发商。北京信合运通科技有限公司总经理郝敬涛表示:“选择PowerLinux平台作为信合大数据解决方案的基础架构平台是基于我们在电信行业多年的耕耘,以及我们对电信行业客户需求的深度理解。首先,我们非常看重PowerLinux平台的企业级特性,这是业界独一无二的;第二,IBM在大数据和分析领域的全面性,从软件、硬件到服务的综合实力。包括PowerLinux平台在内,IBM还拥有大量成熟、丰富的大数据软件,比如GPFS、Symphony。此外,IBM非常高的服务水平也保证了我们为客户提供更好的服务;第三,IBM是开源最大的贡献者,IBM对Linux的支持坚定了我们基于PowerLinux平台做大数据方案的决心。对于开源的大数据解决方案,IBM拥有全面的商业化支持,这使ISV能够基于更高的起点,集中精力为客户开发行业定制的大数据方案,满足客户所需,并促进我们自身业务的长足发展。”