首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

大数据高速存储和备份系统

产品简介

大数据高速存储和备份系统硬件结构图

国内一般的大数据存储和备份产品在执行任务时,要求在局域网(LAN)或高网速下才能进行。而我们的系统在广域网(WAN)或较低网速下也可正常运行,并且备份、上载速度很快。

目前,国内市场还没有出现具备我公司产品性能的数据存储和备份系统,公司产品的关键技术源自美国的NetApp公司但在此基础上做了创新和改进。

NetApp公司的OSSV(Open SourceSnap Vault)存储和备份系统可利用数据块(512字节)级增量备份技术来保护在混合存储环境中运行的Windows、Linux、UNIX和SQL Server。OSSV根据更改的数据块而不是更改整个文件系统和创建备份,可极大地提高性能和数据保护频率。我们的项目也应用了这一技术,并在此基础上加以优化。

OSSV的“数据去重复(Dedup)技术”应用在存储系统端而不在备份源上,这样在备份数据时会从备份源通过网络传输大量的未使用“数据去重复(Dedup)技术”处理过的重复数据到存储系统端,从而导致数据备份速度降低。相反,我们公司将把“数据去重复(Dedup)技术”应用在备份源端,并利用SHA256哈希算法进行重复数据的删除运算,这样从备份源到备份目的地,通过网络只传输一个文件中变化的数据块,从而极大地提高了备份速度。

技术创新

对原始数据进行高压缩和去重。

文件级的远程备份和恢复。

虚拟机的备份和恢复。

高可用(HA)Cluster。

本地和远程高速镜像(Mirror)。

文件格式不限

速度快,对网速要求低。

  • 发表于:
  • 原文链接http://kuaibao.qq.com/s/20180424G16NB100?refer=cp_1026
  • 腾讯「腾讯云开发者社区」是腾讯内容开放平台帐号(企鹅号)传播渠道之一,根据《腾讯内容开放平台服务协议》转载发布内容。
  • 如有侵权,请联系 cloudcommunity@tencent.com 删除。

扫码

添加站长 进交流群

领取专属 10元无门槛券

私享最新 技术干货

扫码加入开发者社群
领券