当使用RAID阵列的vSphere单机虚拟机化服务器因物理故障无法启动时,需要通过软件对RAID阵列上数据进行重组,对VMFS文件系统中的虚拟机文件进行提取,本教程可能是目前全网唯一不使用商业软件的可行恢复方案。
本次分享的案例是关于存储的数据恢复,存储上RAID崩溃导致存储无法启动。存储内部共有6台以上虚拟机,其中LINUX虚拟机3台为客户重要数据。 工程师初步分析得出存储结构为所有物理磁盘均在一个存储池内,再由存储池分出几个LUN,LUN1是vmfs卷,三台LINUX虚拟机也是在这个里面。 1、重组RAID 重组过程中发现本RAID5缺失2块盘(第一掉线盘掉线后热备盘顶替,之后又掉线一块盘使得RAID5处于降级状态。最后在掉线第三块盘时盘片划伤RAID崩溃),无法通过校验直接获取丢失盘的数据,所以只能使用磁盘同等大小的全0镜像进行重组(此方法只可用于紧急情况,因为依赖空镜像组成的RAID文件系统结构会被严重破坏,相当于每个条带都会缺失两个块的数据)。 2、提取LUN 分析存储结构,获取存储划分的MAP块。在找到MAP块之后解析得到各个LUN的数据块指针,编写数据提取程序提取LUN碎片。提取完成后进行碎片拼接,组成完整LUN。导出LUN内所有虚拟机,尝试启动。导出虚拟机后尝试启动,同预想相同,操作系统被破坏虚拟机无法启动。 3、提取虚拟机内文件 在虚拟机无法启动的情况下只能退而求其次,提取虚拟机内文件。在取出文件后进行测试,发现大多数文件都被破坏,只有少部分小文件可以打开。在与客户沟通后得知虚拟机内有MYSQL数据库,因为数据库底层存储的特殊性,可以通过扫描数据页进行数据提取。在找到此虚拟机后发现虚拟机启用快照,父盘和快照文件都被损坏的情况下常规合并操作无法完成,使用北亚自主研发VMFS快照合并程序进行快照合并。 4、获取MYSQL数据页并分析 根据MYSQL数据页特征进行数据页扫描并导出(innodb引擎可以使用此方案,myisam因为没有“数据页”概念所以不可用),分析系统表获取各用户表信息,根据各个表的ID进行数据页分割。 5、提取表结构 因为数据库使用时间已久,表结构也曾多次变更,加上系统表在存储损坏后也有部分数据丢失,记录提取过程遇到很大阻力。首先获取最初版本数据库各个表的表结构:合并快照前的父盘因为写入较早,使用第一块掉线盘进行校验获取到这个文件的完整数据,然后提取出其中数据库各个表的表结构,之后客户方提供了最新版的数据库建表脚本。提取记录:分别使用两组不同表结构对数据记录进行提取并导入恢复环境中的MYSQL数据库内,然后剔除各个表中因为表结构变更造成的乱码数据,最后将两组数据分别导出为.sql文件。 6、数据恢复结果 因为两个版本的数据库表结构不同,所以联系了客户方的应用工程师进行调试。调试完成后导入平台,经验证,数据可用本次数据恢复成功。
1 若没有安装RAID管理工具,需先安装RAID管理工具:yum -y install mdadm
RAID5磁盘阵列,由于未知的原因导致存储忽然崩溃无法启动,RAID5阵列中的虚拟机全部丢失,其中3台虚拟机为重要数据,需要主要针对该3台虚拟机进行数据恢复。
一些基于 Linux 的计算机系统系统需要一个intramfs才能正常启动。在本指南中,将说明 initramfs 的概念,以及如何正确地创建和管理 initramfs。
想要弄清楚磁盘阵列恢复,首先就得知道什么是磁盘阵列,磁盘阵列多用于存储服务器,数据服务器等企业级大数据存储领域,磁盘阵列是把多块独立的物理硬盘按不同方式组合起来形成一个逻辑硬盘,当磁盘瘫痪或硬件损坏后,为了恢复存储在阵列平台的数据被称之为磁盘阵列数据恢复,而磁盘阵列能够提供比单个硬盘有着更高的性能和提供数据冗余的技术。
某公司使用的存储,采用RAID5磁盘阵列,由于未知的原因导致存储忽然崩溃无法启动,RAID5阵列中的虚拟机全部丢失,其中3台虚拟机为重要数据,需要主要针对该3台虚拟机进行数据恢复。
/dev/disk/by-name 路径在 SUSE Linux Enterprise Server 11 包中已弃用,也不建议使用。
BIOS:(Basic Input Output System)基本输入输出系统,它是一组固化到计算机内主板上一个ROM芯片 上的程序,保存着计算机最重要的基本输入输出的程序、开机后自检程序和系统自启动程序,可从CMOS中读写系统设置的具体信息。
(Basic Input Output System)基本输入输出系统,它是一组固化到计算机内主板上一个ROM芯片 上的程序,保存着计算机最重要的基本输入输出的程序、开机后自检程序和系统自启动程序,可从CMOS中读写系统设置的具体信息。
尽管存储设备的可靠性不断提高,但数字信息的丢失仍然相当普遍,文件丢失的常见原因包括人为错误、软件故障(如计算机病毒)、停电以及硬件故障。
最近一个朋友的服务器出现了问题,经了解他的服务器是组装的,且配置了RAID5阵列,目前无法正常启动系统,且中间一盘电源系统掉了,对数据进行了损坏,RAID正在进行数据修复中,但复制完成后发现系统无法启动,且重新安装系统也会报需要格式化磁盘,这时候如果直接安装又怕数据损坏,但是他需要将数据备份出来,于是想到了用WINPE系统,但是就目前而言百度能找到的PE系统都是无RAID阵列卡驱动的,或都阵列卡驱动不对的,为此我需要自己定制一个PE系统来解决这一问题,在这里将PE系统定制的方法说一下,希望以后遇到这样问题的朋友有所帮助;
硬盘的物理结构是比较复杂的,这里我们只需要知道最常用到的几个术语即可,也就是chs寻址中所涉及到的结构
1.常见的Linux发行版本都有什么?你最擅长哪一个?它的官网网站是什么?说明你擅长哪一块?
有个刚结束的项目,在西山,不对,应该叫做金庭镇,好多年了,总是改不了口。客户热情邀请咱过去玩一天,好久没去那边玩了,又是客户邀请,实在不能拒绝,就兴冲冲地去了。
Greenplum属于一种看起来“较重”的数据库MPP架构,不像基于MySQL基于中间件的架构那么轻量,但是要说一些具体的场景,比如Greenplum支持存储过程,支持列式存储,加上分区表和内置的数据分片等多种模式,都是典型的OLAP场景,术业有专攻还是有一定道理的。
前天的文章开头还提到,年后第一天上班很清静、很悠闲,与往常的经验相悖,其实那都是假象,只是有的客户还没上班而已,这不,今天就接到让人心惊肉跳的报修了。
由于时代和磁盘技术发展的限制(单盘容量和性能发展缓慢),产生了raid相关技术。技术产生了,如何才能快速的来实现和进行部署呢?最简单最快的方法就是在操作系统层面实现或者在操作系统上部署raid软件(有点类似虚拟化里面kvm和xen的区别,kvm在linux内核里,xen是linux系统层面上的软件)。功能是轻易的实现了,但是性能呢,非常一般。早期阶段,CPU技术发展有限(也没有现在的什么多核超线程,频率也比较低),但raid计算又会消耗大量的CPU,造成CPU使用飙升。
邓延军 (deng.yanjun@163.com), 硕士研究生, 西安电子科技大学软件工程研究所
dell服务器数据丢失后,一般情况下数据都是可以100%恢复的,因此切记勿对服务器硬盘调换顺序,强制上线,重组等任何危险操作,否则将有可能对原有数据造成二次破坏,永久性不可恢复。
装过黑苹果的人都知道,装黑苹果时,除了需要准备系统镜像以外,还需要有一个引导U盘。 装黑群晖也是同样的,也需要一个单独的引导U盘。不过装完黑苹果之后可以将引导转移到电脑硬盘上,而黑群晖则需要一直插着引导U盘。 苹果电脑的系统叫做MacOS,微软的叫做Windows,群晖系统则叫做DSM,它是DiskStation Manager的缩写。 黑群晖的系统镜像后缀为.pat,引导文件后缀一般为.img。
GPL:(通用公共许可证):一种授权,任何人有权取得、修改、重新发布自由软件的权力。
U是一种表示服务器外部尺寸的单位,是unit的缩略语,一般只有机架服务器使用该单位。服务器的厚度以4.445cm为基本单位。所谓“1U的PC服务器”,就是外形满足EIA规格、厚度为4.445cm的产品。
解决系统性能问题的一般思路 下面从影响操作系统性能的因素、性能优化工具、系统性能评价标准三个方面介绍优化Linux的一般思路和方法。 影响Linux性能的因素 1.CPU CPU是操作系统稳定运行的根本,CPU的速度与性能很大一部分决定了系统整体的性能,因此,cpu数量越多、主频越高,服务器性能也就相对越好。但事实也并非完全如此。 目前大部分CPU在同一时间内只能运行一个线程,超线程的处理器可以在同一时间运行多个线程,因而,可以利用处理器的超线程特性提高系统性能,在linux系统下,只有运行SMP内核
很多客户和企业经常选择在节假日进行数据库维护,而工程师也经常很容易在假期前后产生“假期松懈症”,所以通常假期附近总是企业运维事故多发期。墨菲定律无处不在,不要以为哪些小概率事件不会发生,它们只是在积蓄力量。 在中秋节前,我们一共接手了3则数据恢复案例,我和大家分享一下案例概要,与大家共为警示。 磁盘故障导致数据库损毁 用户的磁盘组一共8块硬盘,做的RAID5,由于是制造企业,对于IT的了解和认识有限,可以一直侥幸的认为系统是足够安全的,每日进行逻辑导出备份,但是备份同样存储在一个存储设备上。忽然之间,整个R
1.解释下什么是GPL,GNU,自由软件? GPL:(通用公共许可证):一种授权,任何人有权取得、修改、重新发布自由软件的权力。 GNU:(革奴计划):目标是创建一套完全自由、开放的的操作系统。 自由软件:是一种可以不受限制地自由使用、复制、研究、修改和分发的软件。主要许可证有GPL和BSD许可证两种。 2.如何选择Linux操作系统版本一般来讲,桌面用户首选Ubuntu;服务器首选RHEL或CentOS,两者中首选CentOS。 根据具体要求: ①安全性要求较高,则选择Debian或者FreeBS
在《如何为服务器硬盘配置RAID或JBOD模式》一文中提到,单张RAID卡无法同时启用RAID模式和JBOD模式,即无法混合管理,如果RAID卡为所有硬盘配置了JBOD模式,那么用于安装操作系统的两块SSD无法通过RAID卡做RAID 1。除非有两张RAID卡,把SSD和数据盘分开管理,一张启用RAID模式,为两块SSD做RAID 1,另外一张启用JBOD模式,管理所有数据盘。或者在软件层面实现操作系统的软RAID。本文将主要讲述如何在操作系统层面配置软RAID。
安装和配置FreeNAS服务器后,需要在FreeNAS Web UI下进行以下操作。
某法院的一台服务器由于硬盘出现故障导致服务器崩溃,在当地一家数据恢复机构进行了数据恢复操作,但是数据恢复没有成功,于是负责人在北京寻找服务器数据恢复公司进行数据恢复。这台服务器的基本配置情况如下图中所示。
一个硬盘可以有一个主分区,一个扩展分区,也可以只有一个主分区没有扩展分区。逻辑分区可以若干。
根分区包含Linux系统所有的目录。如果在安装系统时只分配了/分区,那么上面的/boot、/usr和/var将都包含在根分区中,也就是这些分区将占用根分区的空间。
安装基于Ubuntu14.04 Desktop的Raid1。由于采用UEFI/GPT方式作为系统启动方式,在安装过程中出现了很多异常情况。本文记录安装的过程。
最近,关于腾讯云用户前沿数控公司数据受损一事让数据安全再次成为大家关注的焦点。腾讯云也终于发布了事情原委,详见:关于客户“前沿数控”数据完整性受损的技术复盘。详见:关于客户“前沿数控”数据完整性受损的技术复盘。
我在互联网上经常看到这样的说法:RAID很危险,RAID磁盘阵列在重建过程中失败的可能性几乎是100%,因为硬盘驱动器已经变得非常大。
本课程会详细讲解服务器硬件的基本概念和分类,服务器的硬件组成和相关技术,服务器的硬件组装和软件安装流程,服务器的BIOS设置和固件更新以及板载RAID的配置,服务器操作系统和驱动程序的安装,服务器远程管理功能配置,以及服务器硬件启动过程和常见硬件故障的排除。 课程收益 了解服务器硬件的基本概念和分类方式,掌握服务器各个组成硬件的相关知识和技术,熟悉服务器硬件组装和软件安装流程,掌握常见品牌服务器主板的BIOS设置、固件更新以及板载RAID的配置方法,熟悉服务器操作系统和驱动程序的安装,掌握服务器远程管理功能的配置和使用,了解服务器硬件启动过程和常见硬件故障的排除。 讲师介绍 赵振坤 更多讲师课程 服务器硬件工程师,10年以上工作经验,2003年进入IT行业,曾任方正电脑售后工程师,维修站站长,并带领服务团队取得2005年方正电脑华中地区服务佳规范奖。 从2006年起,一直在服务器、工作站、存储硬件领域摸爬滚打,曾任中关村某服务器硬件公司技术总监,负责技术部的日常工作与技术培训,在服务器硬件技术方面有着10年以上的学习工作经验。 课程大纲 第1章:服务器概述(理论讲解) 1. 课程简介 7:23 2. 服务器的概念和分类 11:38 第2章:服务器硬件组成及相关技术(理论讲解) 1. 主板芯片组和总线的概念 18:21 2. 单路服务器芯片组发展简介 7:48 3. 单路服务器芯片组(3000系列芯片组) 18:12 4. 单路服务器芯片组(3200系列芯片组) 13:34 5. 单路服务器芯片组(3400系列芯片组) 15:56 6. 单路服务器芯片组(C200系列&C216芯片组) 17:50 7. 单路服务器芯片组(C220系列芯片组) 19:23 8. 单路服务器芯片组(C230系列芯片组) 16:16 9. 双路服务器芯片组发展简介 4:10 10. 双路服务器芯片组(5000系列芯片组) 17:22 11. 双路服务器芯片组(5100芯片组) 8:53 12. 双路服务器芯片组(5400芯片组) 18:12 13. 双路服务器芯片组(5500系列芯片组) 40:06 14. 双路服务器芯片组(C600系列芯片组) 36:53 15. 双路服务器芯片组(C612芯片组) 17:45 16. 四路服务器芯片组发展简介 6:59 17. 四路服务器芯片组(E8500&E8501芯片组) 22:50 18. 四路服务器芯片组(7300芯片组) 27:49 19. 四路服务器芯片组(7500芯片组) 28:03 20. 四路服务器芯片组(C602芯片组) 15:39 21. 四路服务器芯片组(C602J芯片组) 11:06 22. 四路服务器芯片组(C612芯片组) 20:09 23. 服务器主板扩展插槽与IO接口 22:03 24. 服务器CPU 17:48 25. Intel ARK安装与演示 17:05 26. 服务器内存 28:50 27. 服务器硬盘 19:58 28. 服务器机箱&电源 23:23 29. 服务器网卡 8:57 30. RAID卡 39:12 第3章:组装一台单路塔式服务器(实战演示) 1. 组装一台单路塔式服务器演示(1) 34:38 2. 组装一台单路塔式服务器演示(2) 22:58 第4章:组装一台2U机架式服务器(实战演示) 1. 组装一台2U机架式服务器演示(1) 26:32 2. 组装一台2U机架式服务器演示(2) 14:27 第5章:服务器主板BIOS设置与固件更新(实战演示) 1. BIOS EFI UEFI概述 3:59 2. 如何创建USB DOS启动盘演示 12:23 3. 英特尔服务器主板BIOS设置演示 27:48 4. 英特尔服务器主板固件更新演示 15:17 5. 超微服务器主板BIOS设置演示 21:39 6. 超微服务器主板固件更新演示 12:47 7. 华硕服务器主板BIOS设置演示 19:32 8. 华硕服务器主板固件更新演示 13:16 9. 泰安服务器主板BIOS设置演示 12:07 10. 泰安服务器主板固件更新演示 1
该mdadm实用程序可用于使用Linux的软件RAID功能创建和管理存储阵列。管理员可以非常灵活地协调各自的存储设备,并创建具有更高性能或冗余特性的逻辑存储设备。
GNU计划(又称革奴计划),是由Richard Stallman(理查德·斯托曼)在1983年9月27日公开发起的自由软件集体协作计划。它的目标是创建一套完全自由的操作系统。GNU也称为自由软件工程项目。
glusterfs、ceph、minio在开源界,属于比较流行应用较广的三个分布式存储系统。现在重点介绍下,这三个分布式系统的架构以及和raid的类比,让大家把存储明明白白的搞透彻。
伴随着互联网行业的发展,金蝶和用友分别都有可部署在云端的产品,如K3cloud与U8等。企业本身也变得越来越轻,原先动辄几万甚至几十万的机房部署与人工管理,是现代化企业所不能接受的,在残酷的生存环境下,他们需要更轻的模式和更经济的方案。随着公有云市场的逐渐繁荣,越来越多的企业开始进行云上的实践,ERP系统在云端的部署,也逐渐形成一种新的业务模式,节省了企业建设机房与昂贵的固定人工成本。将机器托管在云端,由专业的云厂商来管理、运维基础设施,无需太多的考虑扩展和冗余的问题,大幅度降低系统部署的支出,而转为按需付费,是企业所乐意接受的。
原文链接:http://7424593.blog.51cto.com/7414593/1744358
很早之前,我就想入手 NAS 了。当时手中已有三块笨重的移动硬盘,里面系统地存放着各类编号目录,依次存储着各种高清电影、电视剧、纪录片、公开课、无损音乐、全套漫画、课件PPT、系统iso镜像、单机游戏等等文件。我给它们起名叫「移動式電磁信息交互矩陣」,编号I(已坏)、II、III、IV。根目录还特意放了「文件索引列表.txt」、「失主联系.txt」、「磁盘保养.txt」。它们就是我的个人数据中心。
实用的数据恢复软件有什么?电脑中的数据文件对很多的小伙伴来说都是非常重要的,在下载安装新的软件设备时都需要非常谨慎,一旦碰到一些病毒就可能会导致文件丢失,想要恢复这些文件并不是很容易,需要使用专业的数据恢复工具才可以对其进行恢复,那么有没有什么比较好用的电脑数据恢复软件呢?在面对各种各样的数据恢复软件而不知道怎么选择的时候,为大家简单的介绍了一款好用的数据恢复软件!
作为全球数据存储基础设施解决方案的领导者之一的希捷最近推出了突破性的 Exos CORVAULT 自愈块存储系统。这款智能大容量存储产品的一大特点,就是能够简化数据管理、并减少宏观边缘与数据中心环境的人工干预。除了极高的存储密度,Exos CORVAULT 新品还提供了 SAN 级别的性能,结合第六代 VelosCT ASIC、ADAPT 纠删码数据保护、以及自我修复等功能。
一、绪论 Linux系统在日常工作中已经是我们朝夕相处的亲密伴侣,每次当我们按下可爱的电源键那一刻起直到出现熟悉的登陆界面。这短短的一瞬间它都经历什么那?? 二、Linux启动过程 对于一台
Linux系统在日常工作中已经是我们朝夕相处的亲密伴侣,每次当我们按下可爱的电源键那一刻起直到出现熟悉的登陆界面。这短短的一瞬间它都经历什么那?? 二、Linux启动过程 对于一台安装了Li
在分享了VMware的容灾和双活方案以后,受到到了广大朋友欢迎。本公众号将继续分享我在工作中和学习中的一些心得,也欢迎大家一起交流。 《VIOS HealthAdvisor 工具的使用与分析 》、《AIX 下磁盘I/O 性能分析》、《Power 服务器IVE 网卡etherchannel 配置步骤与性能评估》、《PowerVM 环境下实施PowerHA7.1 要点》、《IBM PowerHA6.1 DARE 的功能介绍》 、《GPFS 3.4 的配置变更与性能评估》、《AIX 6.1 中TCP 应答时间参数
领取专属 10元无门槛券
手把手带您无忧上云