爱数一体化容灾技术——重复数据删除

爱数 发表于:12年06月20日 10:30 [来稿] DOIT.com.cn

  • 分享:
[导读]也许有人认为这只是一个全球性的大背景,具体到企业或者个人上,大数据也许没有那样明显的体现。然而,事实真的是这样吗?

基于数据类型优化的重删技术

早在2008年,爱数就在重复数据删除技术领域取得相关专利,与其他重复数据删除技术不同之处在于,爱数一体化容灾技术平台所采用的重复数据删除有三个主要核心优势:

1. 基于数据类型的指纹识别:通常的做法是基于全局的指纹库识别进行重复数据块的识别,但是我们发现,不同类型的数据,本身的重复率就不高,比如办公文档类型 和视频图片类型,测试数据表明,混合类型的数据重删率与这种基于数据类型的指纹识别相比,重删率基本相当,但是性能却有不及后者。正是通过这种小改进,获 得了极大的性能和效率的提升。当然,类型识别的基础是OFS对象文件系统提供的全局对象管理算法。

2. 可动态适应的数据分块技术:通过上述基于数据类型的全局指纹识别,爱数重删技术采用了动态分块技术,也就是可以根据类型、源端对象大小进行动态调整,这种 情况比较适合于数据对象大小不一的情况下,重删效果的提升,比如,在大量小数据的场合下,和少量大数据的场合下,二者采用同样分块大小,对于性能和效果表 现都不是很理想,而采用动态分块技术,可以针对不同范围内的数据对象进行适应性分块,使得匹配概率和效率更高。

3. 面向一体化容灾的重删:爱数一体化容灾技术体系下的重删技术,可以适用于定时备份、CDP实时备份和应用容灾,对于定时备份,显而易见,而对于CDP实时 备份和应用容灾,由于实时数据堆积,存储容量、初始化的性能,都是极大的调整,通过重删,提升的正是在实时和容灾数据初始化的性能和空间的有效利用率。

这种基于数据类型优化的源端重复数据删除,对于用户而言,可以根据实际情况进行数据类型和数据块分块范围进行优化,对于高端用户而言,其灵活性和可配置性有了更优的效果。

[责任编辑:王振]
昆腾公司已经算是存储行业的“老手”了,在磁带市场一直保持着优势。随着存储技术的发展,昆腾又适时做出调整,开展磁盘方面的业务。
官方微信
weixin
精彩专题更多
存储风云榜”是由DOIT传媒主办的年度大型活动。回顾2014年,存储作为IT系统架构中最基础的元素,已经成为了推动信息产业发展的核心动力,存储产业的发展迈向成熟,数据经济的概念顺势而为的提出。
华为OceanStor V3系列存储系统是面向企业级应用的新一代统一存储产品。在功能、性能、效率、可靠性和易用性上都达到业界领先水平,很好的满足了大型数据库OLTP/OLAP、文件共享、云计算等各种应用下的数据存储需求。
联想携ThinkServer+System+七大行业解决方案惊艳第十六届高交会
 

公司简介 | 媒体优势 | 广告服务 | 客户寄语 | DOIT历程 | 诚聘英才 | 联系我们 | 会员注册 | 订阅中心

Copyright © 2013 DOIT Media, All rights Reserved. 北京楚科信息技术有限公司 版权所有.