警惕数据库假期综合症

很多客户和企业经常选择在节假日进行数据库维护,而工程师也经常很容易在假期前后产生“假期松懈症”,所以通常假期附近总是企业运维事故多发期。墨菲定律无处不在,不要以为哪些小概率事件不会发生,它们只是在积蓄力量。

在中秋节前,我们一共接手了3则数据恢复案例,我和大家分享一下案例概要,与大家共为警示。

  1. 磁盘故障导致数据库损毁 用户的磁盘组一共8块硬盘,做的RAID5,由于是制造企业,对于IT的了解和认识有限,可以一直侥幸的认为系统是足够安全的,每日进行逻辑导出备份,但是备份同样存储在一个存储设备上。忽然之间,整个RAID组中同时损坏了两块硬盘。一切数据荡然无存。 对于这种情况,只能从幸存的6块盘上进行数据扫描,抽取完好的数据,尽量以最大限度的恢复其中完好的数据内容,当然如果另外两块硬盘有任何一块还可以离线读取,那么事情就会变得简单。 无数事实给我们的警告是:备份重于一切。注意还需要是:分离存储的备份重于一切。
  2. 故障恢复时发现文件离线 客户通过备份去恢复和重构一个系统,恢复时发现有一个文件处于离线状态,无法Online,客户尝试了很多方式和方法,最后的结果是仍然被多个ORA-600错误所困扰,无法回复一个正常的数据库。 这也是备份时缺乏验证和检验导致的,这类问题给我们的警示是:确认备份的有效性和备份同样重要。
  3. 断电引起数据一致性问题 今天遇到的另外一个用户,由于断电导致了数据库无法启动,这个数据库是没有备份的,只能通过隐含参数牺牲一致性,最后启动数据库。这个数据库系统数据量不大,但是在线的应用相当重要。 这个问题给我们的警示是:再小的系统遇到灾难时也和大系统恢复同样复杂。
  4. ITPUB技术论坛全站闪回 中秋节最大的一个事故莫过于ITPUB技术论坛 - 国内最大的数据库论坛,因为意外导致数据故障,目前全站数据暂时恢复到6月10号的数据内容,其他数据正在紧张的恢复之中。回忆起几年前,CSDN用户账户和明文密码泄露,这两者可以共为警醒。

以开发为主的论坛泄露用户明文密码,以数据为主的论坛丢失论坛数据。 这不禁再次让我们警醒:如何强调备份的重要性都不为过。

多年以前我曾经在书中写到:唯一能够让DBA在深夜惊醒的事情就是 - 没有备份。想一想如果今晚你的硬盘损坏,数据丢失,你将如何应对明天?

国庆节马上来临,愿大家的系统平安稳健。

原文发布于微信公众号 - 数据和云(OraNews)

原文发表时间:2015-09-28

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏开源项目

【码云周刊第 10 期】放码过来,四个男人的带头冲锋!!

一周热门资讯回顾 码云全面改版:新界面新态度,更一致的体验 DuangDuangDuang!码云项目的 Readme.md 特殊技能 微软技术透明中心...

3997
来自专栏云计算D1net

谷歌云平台加入对更多微软产品的支持

谷歌正在向Google Cloud Platform(谷歌云平台)的用户提供更多可用的微软软件。 谷歌在12月8日宣布,将允许客户在谷歌云平台上运行Window...

3647
来自专栏企鹅号快讯

从零开始学习Ruby,该如何做?

本身是计算机专业的,07年,大四那年学的Java,当时喜欢用J2EE来称呼,接触了一点ruby,之后就一直没做IT这行,去年公司环境,逼得重操旧业,自已学了学R...

2339
来自专栏Debian社区

互联网协议正在发生变化

当上世纪九十年代互联网开始被广泛使用的时候,其大部分的通讯只使用几个协议:IPv4 协议路由这些数据包,TCP 协议转发这些包到连接上,SSL(及后来的 TLS...

831
来自专栏何俊林

你可能不知道Flutter到底有多火

2018年2月27日,在2018世界移动大会上,Google发布了Flutter的第一个Beta版本。Flutter是Google用以帮助开发者在iOS和And...

1232
来自专栏编程心路

为什么人人都需要学习Git?

先来说说 Git 的由来,Git 是一个版本控制软件,最初是由 Linux 之父——林纳斯·托瓦兹 为了更好的管理 Linux 内核代码而编写的。当时 林纳斯 ...

1521
来自专栏macOS 开发学习

iKiss - Mac OSX 应用开发历程分享技术正题:

好久没更新简书内容了,排除个人松懈的因素之外(当然,这点我是不会轻易承认的?),主要是公司最近一个月连续上马两个项目,除了让人无法拒绝又蛋疼不已需求和欲壑难填的...

964
来自专栏美团技术团队

大众点评订单系统分库分表实践

背景 原大众点评的订单单表早就已经突破两百G,由于查询维度较多,即使加了两个从库,优化索引,仍然存在很多查询不理想的情况。去年大量抢购活动的开展,使数据库达到瓶...

6776
来自专栏Timhbw博客

个人搭建博客中一些100%碰到的问题(附详细解决办法)

2016-09-2021:11:25 发表评论 322℃热度 鉴于许多人在这个途中碰到过问题,而且有一些问题是100%碰见,许多同学都问过我,每次回答大家效率...

3048
来自专栏FreeBuf

企业安全建设之浅谈数据防泄露

前言 数据防泄露在每个公司都是很头疼的事情,大大小小的泄露事件也总是不期而至。本文结合我的使用经验从使用的层面介绍常见的数据防泄露技术手段。 核心数据资产的定义...

3578

扫码关注云+社区

领取腾讯云代金券