rbd的ceph-backup增量备份本地恢复方法

前言

之前有写过一篇关于rbd增量备份的,以及介绍过ceph-backup这款软件

  • ceph的rbd备份软件ceph-backup
  • rbd的增量备份和恢复

这两篇文章里的方法都是基于rbd的快照去进行增量备份,之前文章里的恢复方法都是基于集群进行恢复,也就是需要一个集群进行导入,本篇将介绍另外一个方法,不基于集群进行恢复,直接在本地文件系统上进行恢复,我们来看下这个是怎么恢复的

本篇也可以用于rbd和rbd快照在本地进行合并

实践过程

全量备份的访问方法

rbd在没有做快照的情况下的备份,导出后是一个文件形式的

rbd export testrbd testrbd

使用下面方法进行直接访问

losetup /dev/loop0 testrbd 
kpartx -a /dev/loop0 
mount /dev/mapper/loop0p1 /mnt1/
mount /dev/mapper/loop0p2 /mnt2/

内核块设备使用的时候可以直接进行文件的本地访问,如果是librbd的虚拟机磁盘的形式的直接当raw格式进行直接访问或者传输到OpenStack里面直接访问即可,或者用上面的步骤本地直接访问

增量备份的访问方法

如果使用的是ceph-backup的增量备份,需要离线恢复的话需要一个第三方插件

wget https://github.com/zphj1987/eve4ceph-mdti/archive/master.zip

下载好了后进入代码目录,执行

yum install glib2-devel
yum install glib-devel
make install

执行完了后会生成一个二进制文件,这个 eve4ceph-mdti ,不需要其他配置,直接使用即可

[root@lab244 mnt]# ll /root/test/
total 280
-rw-r--r--. 1 root root 159958 Oct 25 03:10 testrbd@BACKUPUTC20171024T190955.full.tar.gz
-rw-r--r--. 1 root root  60202 Oct 25 03:12 testrbd@BACKUPUTC20171024T191243.diff_from_BACKUPUTC20171024T190955.tar.gz
-rw-r--r--. 1 root root  57568 Oct 25 03:13 testrbd@BACKUPUTC20171024T191358.diff_from_BACKUPUTC20171024T191243.tar.gz

使用ceph-backup生成的是上面的这些压缩包的形式,直接全部解压

[root@lab244 mnt]# ll /root/test/tmp/rbd/testrbd/
total 127788
-rw-r--r--. 1 root root 10737418240 Oct 25 03:30 testrbd@BACKUPUTC20171024T190955.full
-rw-r--r--. 1 root root    19650298 Oct 25 03:12 testrbd@BACKUPUTC20171024T191243.diff_from_BACKUPUTC20171024T190955
-rw-r--r--. 1 root root    18896617 Oct 25 03:13 testrbd@BACKUPUTC20171024T191358.diff_from_BACKUPUTC20171024T191243

解压完成后生成了原始全量镜像和快照增量部分,根据快照时间顺序进行合并

eve4ceph-mdti testrbd\@BACKUPUTC20171024T190955.full testrbd\@BACKUPUTC20171024T191243.diff_from_BACKUPUTC20171024T190955
eve4ceph-mdti testrbd\@BACKUPUTC20171024T190955.full testrbd\@BACKUPUTC20171024T191358.diff_from_BACKUPUTC20171024T191243

执行上面的以后会把快照的差量回滚到全量的那个备份当中

losetup /dev/loop0 testrbd\@BACKUPUTC20171024T190955.full
kpartx -a /dev/loop0
mount /dev/mapper/loop0p1 /mnt
ll /mnt

经过上面的步骤以后,在本地文件系统上面就把增量的部分进行合并了,这里面用到比较关键的一个技术点就是ceph_apply_diff,上面的操作进行了多次增量的备份,数据是按照快照点进行恢复,需要按时间先后顺序把差异合并到第一个full镜像,需要注意的是,做快照如果是librbd,要注意rbd的cache的影响,先flushcache,然后快照,如果是kernel rbd的快照,要注意本地文件系统的缓存的影响

总结

本篇是提供了一种本地恢复增量备份的rbd的方法,在集群之外进行快照的合并,减少了恢复过程对集群的依赖

原文发布于微信公众号 - 磨磨谈(momotan1987)

原文发表时间:2017-11-02

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏吉浦迅科技

CentOS 6.5系统安装配置图解教程(详细图文)

说明: 下面介绍CentOS 6.5的具体安装配置过程 服务器相关设置如下: 操作系统:CentOS 6.5 64位 IP地址:192.168.21.129 网...

4148
来自专栏我的博客

Windows安装MinGW使用gcc和g++命令

MinGW 是一个可自由使用和自由发布的Windows特定头文件和使用GNU工具集导入库的集合,允许你在GNU/Linux和Windows平台生成本地的Wind...

74213
来自专栏holer

手机APP应用怎样从外网访问本地WEB应用

本地安装了WEB服务端,手机APP应用只能在局域网内访问本地WEB,怎样使手机APP应用从公网也能访问本地WEB?

4551
来自专栏holer

外网访问内网MySQL数据库

本地安装了MySQL数据库,只能在局域网内访问,怎样从外网也能访问本地MySQL数据库?

2101
来自专栏大数据-Hadoop、Spark

Unable to connect to zookeeper server within timeout: 6000

1.启动zookeeper 2.启动kafka 3.启动kafka-producer 4.启动kafka-consumer 5.生产一些消息 6.ka...

3976
来自专栏小樱的经验随笔

Javac编译时出现包不存在的报错的解决方案

今天在学习包类调用时出现如下错误: ? packa包不存在,在C盘目录下应该有这个包啊 ? 原因是在当前目录下没找到,因为packa存放在其它目录下 如何解决:...

3776
来自专栏holer

如何从外网访问本地MariaDB数据库

本地安装了MariaDB数据库,只能在局域网内访问,怎样从公网也能访问内网MariaDB数据库?

1315
来自专栏性能与架构

HAProxy配置文件结构

image.png 前面配置负载均衡的示例中,使用了一个简单的配置文件 global daemon maxconn 256 defaults mod...

2814
来自专栏前端小叙

查看端口被占用的情况以及如何解除端口占用

在windows安装好nginx之后,打开nginx.exe失败,我想应该是80端口被占用了,遂找到此方法。 注:以下命令需要在管理员权限下运行 以下文章主要以...

3385
来自专栏holer

如何从外网访问局域网Apache HTTP Server

本地安装了Apache HTTP Server,只能在局域网内访问,怎样从公网也能访问本地Apache HTTP Server?

1701

扫码关注云+社区