中博数据宝产品关键技术解析

 

中博数据宝是由深圳市中博科创信息技术有限公司推出的一款专门针对企事业单位文档管理应用的私有云存储产品,集全局共享、个人网盘、数据备份、分支机构数据传输四大功能于一体。下面来解析中博数据宝产品的关键技术。

1、纠删码技术

数据宝是国内首家采用最安全可靠的纠删码技术构建的私有云存储。数据宝客户端上传一份文件后,先在数据宝网关进行切片加密,采用纠删码技术生成切片文件的冗余,然后分散存入不同节点,只需要部分文件片数即可完整恢复整个文件。

数据宝默认的纠删比是2:2:4,即一份文件写入,先切成2片,再纠删成4片,分散存入不同节点,只要通过其中两个节点上的文件片就能恢复整个文件。数据宝的容错率(纠删比率)可根据客户需求自由调整,与传统raid最多只允许同时坏两块盘相比,数据宝实现在50%以上节点损坏的情况下,仍然安全找回数据。当坏盘需要换盘时,数据重建速度非常快。

2、重复数据删除

文件上传后,数据宝系统会生成一个指纹,并在全局数据指纹区寻找相同的指纹,如果存在相同指纹,则表示已保存了相同的文件,介质服务器则不再保存此文件,而是引用已存在的文件,实现“秒传”。
 
数据宝的重复数据删除技术,是基于文件内容的全局重删,即内容相同的文件只保存一份。这样可以节约大量带宽,减少传输时间,提高文件上传速度,同时节省更多的系统空间。

3、分级数据存储

在分支机构和总部均部署数据宝设备,分支机构数据先自动缓存到本地,再利用公网闲时,定期(晚上/周末)自动传回总部数据中心,灵活的广域网传输策略,可节省带宽和建网成本。数据在分支和总部各保存一份,形成分级数据中心,无论哪部分数据丢失,都可以通过另一部分恢复,安全双重保障。

4、自动备份、强制备份、增量备份

自动备份:客户端设置备份策略,系统按时间点自动备份,无需人工干预。

强制备份:在员工不知道的情况下,管理员可以通过后台强制备份员工电脑上的文件。

增量备份:在上一次备份的基础上,只备份新增或内容有变动数据。数据宝以单个文件为备份粒度,通过比较最近的修改时间和备份时间判定该文件是否需要备份,以此为基础进行的增量备份。

5、集群效应

数据宝可将网络中不同类型的存储设备集合起来协同工作,统一后台管理所有存储节点,形成集群效应。基于分布式文件系统的云存储架构,容量扩展近乎无限。当需要增加存储能力时,只需在数据宝单套设备内添加存储节点即可,且性能不会因扩容而降低。

具体产品详情可参考中博科创公司网站:http://www.zb-kc.com