警惕数据库假期综合症

很多客户和企业经常选择在节假日进行数据库维护,而工程师也经常很容易在假期前后产生“假期松懈症”,所以通常假期附近总是企业运维事故多发期。墨菲定律无处不在,不要以为哪些小概率事件不会发生,它们只是在积蓄力量。

在中秋节前,我们一共接手了3则数据恢复案例,我和大家分享一下案例概要,与大家共为警示。

  1. 磁盘故障导致数据库损毁 用户的磁盘组一共8块硬盘,做的RAID5,由于是制造企业,对于IT的了解和认识有限,可以一直侥幸的认为系统是足够安全的,每日进行逻辑导出备份,但是备份同样存储在一个存储设备上。忽然之间,整个RAID组中同时损坏了两块硬盘。一切数据荡然无存。 对于这种情况,只能从幸存的6块盘上进行数据扫描,抽取完好的数据,尽量以最大限度的恢复其中完好的数据内容,当然如果另外两块硬盘有任何一块还可以离线读取,那么事情就会变得简单。 无数事实给我们的警告是:备份重于一切。注意还需要是:分离存储的备份重于一切。
  2. 故障恢复时发现文件离线 客户通过备份去恢复和重构一个系统,恢复时发现有一个文件处于离线状态,无法Online,客户尝试了很多方式和方法,最后的结果是仍然被多个ORA-600错误所困扰,无法回复一个正常的数据库。 这也是备份时缺乏验证和检验导致的,这类问题给我们的警示是:确认备份的有效性和备份同样重要。
  3. 断电引起数据一致性问题 今天遇到的另外一个用户,由于断电导致了数据库无法启动,这个数据库是没有备份的,只能通过隐含参数牺牲一致性,最后启动数据库。这个数据库系统数据量不大,但是在线的应用相当重要。 这个问题给我们的警示是:再小的系统遇到灾难时也和大系统恢复同样复杂。
  4. ITPUB技术论坛全站闪回 中秋节最大的一个事故莫过于ITPUB技术论坛 - 国内最大的数据库论坛,因为意外导致数据故障,目前全站数据暂时恢复到6月10号的数据内容,其他数据正在紧张的恢复之中。回忆起几年前,CSDN用户账户和明文密码泄露,这两者可以共为警醒。

以开发为主的论坛泄露用户明文密码,以数据为主的论坛丢失论坛数据。 这不禁再次让我们警醒:如何强调备份的重要性都不为过。

多年以前我曾经在书中写到:唯一能够让DBA在深夜惊醒的事情就是 - 没有备份。想一想如果今晚你的硬盘损坏,数据丢失,你将如何应对明天?

国庆节马上来临,愿大家的系统平安稳健。

原文发布于微信公众号 - 数据和云(OraNews)

原文发表时间:2015-09-28

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏开源项目

【码云周刊第 10 期】放码过来,四个男人的带头冲锋!!

一周热门资讯回顾 码云全面改版:新界面新态度,更一致的体验 DuangDuangDuang!码云项目的 Readme.md 特殊技能 微软技术透明中心...

3777
来自专栏云豹直播系统开发

短视频APP开发主要依赖于短视频SDK架构设计

短视频 SDK 架构中主要做的一些事情,这其中最重要的就是短视频 SDK 的架构设计,包括架构设计理念、架构图、整体数据流程、模块架构设计等。今天小编就简单介绍...

2283
来自专栏编程心路

为什么人人都需要学习Git?

先来说说 Git 的由来,Git 是一个版本控制软件,最初是由 Linux 之父——林纳斯·托瓦兹 为了更好的管理 Linux 内核代码而编写的。当时 林纳斯 ...

1391
来自专栏Coding01

我是这么制作「coding01 日报」的

「coding01 日报」为大家每日推送不错的技术帖子,欢迎大家查阅。今天这篇文章的内容是,如何利用 「Workflow」搜集素材和制作每天日报的雏形。

1161
来自专栏企鹅号快讯

从零开始学习Ruby,该如何做?

本身是计算机专业的,07年,大四那年学的Java,当时喜欢用J2EE来称呼,接触了一点ruby,之后就一直没做IT这行,去年公司环境,逼得重操旧业,自已学了学R...

2269
来自专栏木子昭的博客

推荐一些效率实用的"生产力"应用钻石党非Mac独占

网络调试工具 surge ? surge ? mac版surge 在网络代理软件的圈子里,surge是真正的神兵利器! surge发布了mac版和ios版,...

58311
来自专栏美团技术团队

大众点评订单系统分库分表实践

背景 原大众点评的订单单表早就已经突破两百G,由于查询维度较多,即使加了两个从库,优化索引,仍然存在很多查询不理想的情况。去年大量抢购活动的开展,使数据库达到瓶...

6276
来自专栏腾讯大讲堂的专栏

QQ 浏览器7 瞬间启动探秘

今天跟大家分享刚结束不久的腾讯大讲堂专题分享【QQ浏览器7 瞬间启动探秘】活动视频。视频比较长,这里讲堂君把内容大纲梳理出来,大家可以酌情抽取感兴趣的部分观看。...

2055
来自专栏Android 开发者

Android P 开发者预览版首发!

2292
来自专栏Timhbw博客

个人搭建博客中一些100%碰到的问题(附详细解决办法)

2016-09-2021:11:25 发表评论 322℃热度 鉴于许多人在这个途中碰到过问题,而且有一些问题是100%碰见,许多同学都问过我,每次回答大家效率...

2968

扫码关注云+社区