首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

怕坏盘,用华为视频云存储!

解读:视频监控存储可靠性和数据可用性。

硬盘为什么容易坏?

“查看监控”,这是发生恶性事件的时候,当事人家属脑子里冒出的第一个想法。此时最担心的,莫过于监控硬盘坏了,或者监控视频找不到了。

Google收集了10万块磁盘在实际系统环境下的工作信息,总结出基于硬盘使用时间、负载压力下的硬盘平均年故障率(AFR:Annualized failure rates,平均年故障率),具体数据如下:

按照使用时间统计;

基于读写压力作为统计维度

不难看出,硬盘平均年故障率在2%以上,故障率与硬盘使用时间、硬盘读写压力成正比。视频监控系统7*24小时工作,硬盘需要持续写入大量数据,这个工作负载是个人电脑硬盘的几十倍甚至上百倍,这就不难解释为什么监控硬盘总是坏了(此处是重点,各位记住了)。

怕坏盘

快用华为视频云存储OceanStor 9000

既然硬盘是易损件,一定会坏,那么怎么样才能保证数据的安全和可用呢,无非就是从下面三个方面想办法:

尽量别坏(降低故障率)

坏了不怕(增加冗余校验,提升修复速度)

紧急抢救(数据修复)

那么华为视频云存储,在这三个方面都有哪些黑科技呢?

华为存储,硬盘故障率究竟有多低?

“Backblaze”是国外的云服务供应商,今年年初发布了他们的硬盘故障率数据,2016 全年硬盘故障率仅为 1.95%,较 2015 年的 2.47%(以及 2014 年的 6.39%)有显著进步。同一家企业,去年的硬盘故障率比前年减低了0.5%,难道说硬盘故障率还真能够控制?

作为资深的存储人,透露一点专业存储的秘密:硬盘故障率的控制,是专业存储的内功所在。记得前几年同国内No.1互联网公司交流的时候,就探讨过这个问题,当时对方很兴奋的说:“我们今年硬盘年故障率终于控制到了10%以内”。 而根据卡内基梅隆大学的研究结果,硬盘故障率通常在2%~4%之间(业界平均水平)。华为基于对IO模型的优化,精细化的硬盘管理,硬盘故障率比业界平均水平的一半还低。至于究竟用了哪些技术,因具体技术太多,且存在泄密风险,无法在此处展开,如您真确实对这个方向感兴趣,华为存储欢迎有志之士加入,并专门研究此方向。

华为视频云存储OceanStor 9000,

为啥不怕硬盘坏?

前面提到降低故障率,可是故障率再低,硬盘还是坏,坏了咋办呢,只能从系统层面想办法。RAID是存储的基础技术,通过在读写数据过程中增加冗余校验,即使有一部分硬盘坏了,数据依然可以访问。业界最常用的就是RAID5,但RAID5只能容忍一块硬盘故障,如果在数据重构(把故障硬盘上的数据恢复到空闲的硬盘或存储空间里面)完成之前,同一个RAID组再有一块硬盘故障,就会出现视频数据找不到了的情况。要解决这一问题,同样可以从两个方面入手:

1.增加校验(血厚,扛得住)

2.加速重构(回血快)

华为OceanStor 9000视频云存储采用全新的分布式RAID技术,将数据和校验分别写入到分布式存储的多个不同设备、不同硬盘中,从而实现支持+1(容忍单盘故障,类似RAID5)、+2(容忍双盘故障,类似RAID6)、+3、+4等多种冗余策略。最极端情况下即使4节点(144块硬盘)故障,数据依然可用。同时因数据都打散存放在多个设备,多块硬盘,数据重构时采用分布式并行重构,每TB数据重构时间小于1小时,而传统RAID重构1TB数据需要10~20小时。因此即使OceanStor 9000使用10TB硬盘,传统RAID使用1TB硬盘,在坏盘容量相差10倍的情况下,OceanStor 9000依然能够比传统RAID更快的完成数据重构。

而且随着政府,企业对监控的越来越重视,很多视频监控系统在建设的时候就要求跨数据中心的数据保护——容灾,特别是国外的视频监控系统大多都采用了跨机房的数据复制技术,来确保火灾,断电,机房故障等情形下视频数据依然不会丢。OceanStor 支持远程复制技术,可以将数据从A数据中心复制到B数据中心,轻松实现跨数据中心的数据保护。

华为视频云存储OceanStor 9000

还能抢救监控视频?

人要是因突发疾病,生命垂危可以抢救,视频数据能够抢救吗?其实也是可以的,但这往往需要非常专业的技术人员,在专业的环境中来完成。而且往往价值不菲。

OceanStor 9000内置视频修复技术。视频修复技术专门针对视频监控场景开发,我们都知道视频数据其实就是一帧一帧的画面。OceanStor 9000分布式RAID将视频文件打散存储到不同设备,不同硬盘上。即使多个设备、多块硬盘故障,在无法读取完整的视频的情况下,通过视频修复技术,也可以读取未故障设备,硬盘上的数据(就如同用BT下载电影,虽然整部电影没有下载完,但也可以播放,只是有些画面会出现画面卡顿/丢帧,或者画面存在马赛克)。

11个9数据持久性的公有云存储?

华为视频云存储,服务全球上百座城市

华为存储不仅服务于全国32个省级行政区、直辖市;还跨出国门在俄罗斯历史名城圣彼得堡,在卡塔尔多哈机场,在迪拜等全球上百座城市部署总容量接近EB容量。守护万家平安,保卫万家灯火。

平安中国,连接世界

华为视频云,一直在你身边

华为存储青海平安城市视频

  • 发表于:
  • 原文链接http://kuaibao.qq.com/s/20171209B0NBXI00?refer=cp_1026
  • 腾讯「腾讯云开发者社区」是腾讯内容开放平台帐号(企鹅号)传播渠道之一,根据《腾讯内容开放平台服务协议》转载发布内容。
  • 如有侵权,请联系 cloudcommunity@tencent.com 删除。

扫码

添加站长 进交流群

领取专属 10元无门槛券

私享最新 技术干货

扫码加入开发者社群
领券