登顶数据库领域最高峰 星环科技定义大数据中国新力量

我们知道,在中国科技产业发展中,基础软件一直是一大“短板”,特别是在大数据领域,国内软件公司基本都集中在应用层,底层大数据平台主要采用国外开源软件集成和封装,再加上整体起步较晚,技术上也很难获得市场和客户的信任。

但如今,这样的现状已经被星环科技直接打破。5月3日,全球知名数据管理系统评测基准测试委员会主席Raghunath Nambiar在上海宣布,星环TDH平台成为全球首个经过TPC官方审核的TPC-DS基准测试的数据平台。

这也意味着由星环科技自主研发的TDH平台,打破了该领域十二年来没有厂商通过该项测试的局面,也在世界范围内填补了该项技术的空白。可以说,这不仅是星环科技自己的胜利,也是星环科技所代表的中国科技公司的胜利,更是中国在基础软件领域技术突破的重大胜利。

那么,什么是TPC-DS基准测试,它的含金量究竟如何?而星环科技,这家成立于2013年的初创公司,为何能在短短5年时间之内“登顶”数据库领域的最高峰,在它背后究竟有哪些独特的优势和竞争力呢?

登顶数据库领域最高峰

很多人也许有疑问,TPC到底是一个什么机构?TPC-DS基准测试,为何又受到业界如此广泛的关注?

TPC(事务性能管理委员会),其实是目前最知名的非赢利的数据管理系统评测基准标准化组织,它定义了多组标准测试集用于客观地、可重现地评测数据库的性能。

TPC委员会主席Raghunath Nambiar

不仅如此,TPC组织开发的测试模型都是源于最为典型的实际应用系统,并且会根据技术的发展情况不断修改,对于实际应用有很强的参考价值。同时,每一项测试成绩发布前,都会经过工程师现场检查和TPC委员会集体审查等,审核条件十分苛刻,因而TPC测试基准及其发布的测试成绩在数据库领域中具有很大的影响力。

TPC从1988年成立至今,已经建立了多款数据库评测基准,如TPC-A、TPC-D、TPC-H和TPC-DS,其中的DecisionSupport(DS)子集,即TPC-DS,是用于评测决策支持系统(或数据仓库)的标准SQL测试集。这个测试集包含对大数据集的统计、报表生成、联机查询、数据挖掘等复杂应用,测试用的数据和值是有倾斜的,与真实数据一致。

可以说,TPC-DS是与真实场景非常接近的一个测试集,也是难度较大的一个测试集。所以,TPC的测试成绩如今更成为了诸多金融、电信、能源、交通等关键行业客户采购软硬件基础设施的重要参考和依据。

形象的说,TPC-DS的各项测试环节,就是大数据领域顶尖高手们攀登世界最高峰珠穆朗玛峰的过程,此间的重重困难由此可想而知。但越困难越危险,也就越迷人,登顶的魅力,就是挑战自我、超越自我的过程。

确实如此,TPC-DS测试尽管早在2006年就已制定好标准,但在全球范围内,在此之前从未有任何一家公司发布官方认定的完整测试结果。

星环科技创始人、董事长孙元浩

对此,星环科技创始人、董事长孙元浩表示:“主要是TPC-DS模拟的应用场景数据量非常之大,通常都是10TB起步,传统数据库软件根本无法处理如此海量的数据。过去几年,尽管官方也一定程度下调了评测标准,且随着新技术的大量出现,很多做Hadoop公司也试图攻克这一难题,但进展仍然非常缓慢。”

星环科技也加入到了这场“竞赛”之中,当时使用星环TDH5.1版本,在12台服务器上运行了10TB数据,通过一系列的努力,最终完整通过了99个Queries测试案例,经受住了各种业务模型的考验(如分析报告型,迭代式的联机分析型,数据挖掘型等),由此成为全球首家通过TPC-DS测试的科技公司。

孙元浩说:“去年7月我们就提交了测试结果,由于是业内第一家成功通过TPC-DC测试,所以TPC官方也高度重视,请了第三方花费了5个月时间才完成审计,并发布在TPC官网上进行为期2个月的公式,确保测试结果严格遵守相关标准,最终我们经受住了严苛的考验。”

毫无疑问,星环TDH成为业界首个通过TPC-DS测试标准的产品,不仅标志着其成功“登顶”数据库领域的最高峰,同时对整个大数据行业也意义重大,我们可以从三个维度来看:

首先,这标志着以星环TDH为代表的、应用新一代技术的数据库产品,已在性能、功能上开始超过传统的数据库产品。过去,传统的数据库尽管在功能上能通过TPC-DS测试,但在数据量特别庞大的情况下,性能却又无法满足要求。如今,星环TDH不仅能全部满足功能,而且在性能上还全面超越了传统数据库产品。

其次,星环TDH还在数据库行业中重新树立了一杆标尺,即通过Single Platform(一个平台),而不是混合架构,就可以解决大数据时代客户的新痛点。同时,星环科技在大数据领域的新理解和新实践,还可以反馈到TPC测试的基准标准和应用中。

最后,这也表示星环科技在数据处理方面的能力已经到了世界最高水平,同时也证明了中国在基础软件,特别是大数据领域也有了绝对的技术实力和能力。所以,这不仅是星环科技自己的胜利,也是星环科技所代表的中国科技公司的胜利,更是中国在基础软件领域技术突破的重大胜利。

星环科技的探索与创新

实际上,早在去年《星环科技:源于Hadoop,超越Hadoop》一文中,我就指出,星环科技凭借较强的技术驾驭能力,以及对中国企业用户痛点的捕捉,使得星环在大量的市场成功实践中,逐步摸索出了一条差异化的大数据之路,更重新定义了开源软件的中国之路。

据了解,过去一年星环科技在技术、生态、市场乃至全球化方面都展开全新的探索与创新,为其进一步发展无疑奠定了坚实的基础,具体而言:

第一,在技术领域全面布局“ABC”,即发布人工智能平台智子;升级星环TDH到6.0版本,新增分布式图数据库Transwarp StellarDB和分布式闪存数据库Transwarp ArgoDB;推出新一代智能大数据云平台Transwarp Data Cloud。

可以说,三大重量级产品线的发布,对星环科技的发展都有十分重要的价值。

例如,随着人工智能和大数据的不断地交叉融合,整个市场成为新的热点和风口。所以,星环科技将这个产品线独立出来,不仅可以让人工智能产品访问各个数据平台,同时通过这个产品自身的优势,提供通用的AI工具甚至是一些解决方案的模板,由此也可以推动人工智能在中国的快速落地。

再如,全新的Transwarp Data Cloud平台,不仅可以推动服务容器化以及大数据生态上云,实现多租户间的应用隔离、数据隔离、资源隔离、运行隔离,重新定义普通企业处理、应用、开发数据的方式,更可以改变大数据产品的未来演进形态。

此外,Transwarp ArgoDB的推出也有革命性的意义,星环将过去几年来的研发成果,特别是和闪存优化相关的组件,加入到了Transwarp ArgoDB中,由此构建了高性能交互式数据集市,满足多维实时检索、准实时分析和海量数据离线分析业务场景。

正如孙元浩所言:“从三年前开始,星环就计划打造具有自主知识产权的、全部星环的IP产品,ArgoDB就是我们努力的成果。这款产品是星环结合中国市场的需求,从存储层,到计算引擎层,再到数据库层,都全部完成了重构。所以,它的发布意味着在大规模数据处理领域,中国公司已有了完全自主研发的产品。”

第二,在社区和生态建设方面,星环科技也一直不遗余力。其中,星环于去年发布的免费TDH社区版,在交付后的短短一个月之内就吸引了大批的客户陆续使用,在没有任何推广的情况下,获得了400多个客户下载使用。

此外,针对大数据和人工智能人才的培养上,星环科技也累积培训了开发者超2000人,累计为超过400家企业提供培训,颁发证书超过1000张,跟20多家高校达成合作,逐渐形成了以星环技术为核心的生态系统。

今年,星环科技还成立星环大学,并与北京大数据研究院达成战略合作,联合大数据分析与应用技术国家工程实验室共建星瀚大数据联合实验室。可以说,此举在加强星环生态建设的同时,更为行业人才培养,推动高校相关课程建设起到关键作用。

第三,在市场拓展层面,星环科技如今覆盖了金融、政府、交通、公安、能源、电信、电力、教育、航空、物流等十多个行业,累计1000多个客户使用星环的产品,客户几乎覆盖了全国的各大省市。

值得一提的是,星环科技还在一些新兴行业中“斩头露角”,如制造业以及轨道交道行业中的空客、春秋航空、郑州轨道交通成为其客户,这也标志着星环科技在发展5年后,已在中国的大数据市场初具规模和影响力。

最后,星环科技还加大了“出海”的力度,今年星环科技成立了加拿大公司,在新加坡也做了一些工作,如与新加坡政府人工智能核心(AISG)项目签订了战略合作协议,和新加坡国立大学和新加坡理工大学也有相关合作,这些动作无疑也是星环科技逐步全球化的一个重要步骤。

由此可见,领先和过硬的技术实力,逐渐完善的社区和生态建设,以及来自行业用户的口碑效应,让星环科技正在向更多领域形成“全行业、全场景”的布局和优势,这将奠定星环科技在大数据市场中的快速领跑地位,并为星环走向更大的成功提供了足够的支撑力。

解读背后的雄心与壮志

当然,星环科技近几年的出众表现,不仅赢得了客户的订单,更得到了其他国际权威机构的认可,在美国著名咨询机构wikibon近期发布的2018年大数据厂商分析报告中,星环是唯一一个出现在报告中的中国公司。

确实如此,以大数据为代表的中国基础软件行业,如今正面临着一个全所未有的机遇和挑战,一方面新技术的发展日新月异,以星环为代表的自主创新公司,正以新技术上的优势,形成了“完整取代”过去传统关系型数据库的实力;另一方面,无论是物联网、还是人工智能的蓬勃发展,也对海量数据的处理,以及更加复杂的应用提出了新的挑战,同样也给了星环更多证明自己实力的机会。

但是,在孙元浩看来:“作为本土的软件研发企业,星环科技在过去五年中坚持大数据底层基础产品的研发、坚持自主创新,在一些领域实现了技术突破,基础软件实现了弯道超车,但也需要整个产业链的支持。”

客观的说,基础软件和跟芯片一样,是技术难度高,投入大,周期长,见效慢的行业,发展基础软件无疑也是一件很困难的事情。但目前在政策、市场、以及采购习惯上,对那些坚持自主创新的中国企业而言,还存在很多的挑战,可以看到:

一是,对知识产权重视不足。目前,国内绝大多数客户认同软件的应用价值和能力服务价值,但是对基础软件的价值重视程度不够,不愿意对知识产权付费,但基础软件本身的投入是很大的。所以,要发展自主知识产权的基础软件,未来还需要国内加大对知识产权的重视。

二是,对新技术采纳过于保守。很多创业公司在发展中,经常会遇到一个十分“无奈”的问题,那就是很多大中型客户通常按照规模和营收来选择服务商,而对新技术的采纳反而过于保守。因此,全社会要逐步形成重视技术创新,积极采纳创新技术,以技术实力来评判企业的良好氛围。

三是,创业公司的营商环境有待改善。换句话说,政府有关部门能够创造更好竞争环境,才能让创业公司能够有更大的成长空间。由此,中国的基础软件才会得到健康发展,中国创业公司的实力才会不断壮大。

因此,孙元浩最后表示:“我们正在探索一条自主创新基础软件之路,因此也衷心的希望未来全社会,特别是企业的决策者要更加重视基础软件的知识产权价值,以技术实力来评判企业,同时给致力于自主研发的创业公司更多机会,这样基础软件业才能走向更大的成功,最终能够扎根下来。”

从这个角度来说,读懂了星环科技致力于自主创新的决心和信心,也就看懂了星环科技对发展中国基础软件行业的雄心与壮志。