任新勃 发表于:14年10月10日 17:36 [综述] DOIT.com.cn
近几年信息技术在飞速发展,互联网行业发生着日新月异的变化。互联网由原来的WEB1.0时代过渡到了WEB2.0 时代,逐渐显示出三个特征:原创性、互动性、聚合性。用户与互联网之间的交互方式发生了巨大的变化,用户从内容的被动接收者成为了内容的创造者。互联网已经成为用户彰显个性的场所:越来越多的人在互联网上创建播客、博客和相册等与个人相关的内容。因此 ,一系列挑战也随之而来。
1、数量庞大的小文件。每天产生上百万个图片、FLASH、文章等每个大约几十KB的小文件将会给存储系统带来巨大的压力。现有存储系统对高达上亿数量文件的检索速度往往难以令人满意,并且由于单目录下文件数量的限制,文件的管理也极为困难。
2、迅速增加的数据量。随着WEB2.0 应用用户的增多,数据呈爆炸性增长,存储系统如果没有灵活的可扩展性,存储容量的添加和管理将会变的异常困难。
3、高互动性。负责流媒体文件的内容交付式网络需要提供文件快速交付,用户绝不会容忍缓慢的视频播放、暂停缓冲或网站中断。研究表明,网络用户能够承受等待信息检索的时间是2秒。
4、Cache 命中率低。用户为了提高应用对文件的访问效率,往往会在前端配置一个稍大容量的缓存。但由于小文件的数量极其庞大,应用对这些文件访问的随机性非常高,使得Cache 命中率极低,缓存失去了应有的作用,导致应用需要直接到后端存储系统上读取数据,给存储系统带来了极大的压力。
中博集群存储解决方案
中博集群存储系统是一款针对海量数据存储应用而设计的集群存储系统,采用通用的硬件设备作为构建单元,为应用提供全局统一的文件系统映像和完全与本地磁盘兼容的访问接口。
中博集群存储系统为用户彻底解决了海量小文件存储的难题,凭借领先的技术优势为WEB2.0 应用提供高性能、高可靠的存储系统,帮助企业提升竞争力。中博集群存储系统采用集群化的结构提供了简单的管理方式,并支持动态在线扩容;对外提供单一的系统映像,可以做到真正按需购买,随时扩容,节约了用户的一次性投资。
PB级容量的单一文件系统便于管理
中博集群存储系统采用统一的虚拟存储池技术,提供PB级的存储容量,允许所有的数据存放于一个单一的全局命名空间下,消除了所有人为的、物理的和逻辑的壁垒。系统在增加容量时,管理员不需要操心拆分数据和迁移用户,因为所有的数据都在统一的虚拟存储池中,从而更好地实现对海量文件的管理。
中博集群存储系统采用高效的并行计算技术,让所有IO节点同时工作来提供性能,极大提高了应用对I/O请求的响应速度,突破高并发访问带来的带宽和服务器性能瓶颈,可提供超过100GB的聚合带宽。通过节点并发的数据存储技术,I/O峰值瞬间就可达每秒数百兆,直至网络带宽上限。当某一节点出现故障时,不会影响其它IO节点工作,并实现故障的自动切换。
灵活的扩展性满足业务增长对存储新的需求
中博集群存储系统通过完全在线式的扩容技术、异构扩容技术以及智能管理技术,在不影响原有系统运行的前提下,轻松的进行计算节点、传输带宽、存储容量等方面的扩展,完全消除了用户在扩容、升级、维护时对前端业务的影响,灵活的进行在线硬件更新替换。
特色分级存储技术加速访问,高效利用空间
对流媒体热点数据进行自动分级存储。系统根据设定的规则会自动将热播节目和最新节目由近线存储调入到在线存储里面,同时将某一段时间内在线存储中访问次数较少的视频文件替换到近线存储里面,存储系统的分级不仅提高了数据读取的速度,同时最大限度地提高了磁盘空间利用率,降低了总体投入成本。
用户端与存储端直接传输,更高的检索和访问速度
中博集群存储采用先进的全分布式文件系统技术,元数据服务器不参与实际数据传输,只用来建立传输会话,会话一旦建立,数据就直接在用户和存储系统之间进行传输,可实现海量文件的快速检索,提升用户体验。
控制存储成本
传统存储阵列无法从根本上满足数据增长对存储的新需求,更新换代往往要花费大量成本。中博集群存储采用分布式文件系统,整合网络中大量经济型的X86架构,可将廉价磁盘和低端服务器利旧再利用,保护已有投资,减少后续投入,节省管理维护成本。
具体产品详情可参考中博科创公司网站:https://www.zb-kc.com。