rbd的ceph-backup增量备份本地恢复方法

前言

之前有写过一篇关于rbd增量备份的,以及介绍过ceph-backup这款软件

  • ceph的rbd备份软件ceph-backup
  • rbd的增量备份和恢复

这两篇文章里的方法都是基于rbd的快照去进行增量备份,之前文章里的恢复方法都是基于集群进行恢复,也就是需要一个集群进行导入,本篇将介绍另外一个方法,不基于集群进行恢复,直接在本地文件系统上进行恢复,我们来看下这个是怎么恢复的

本篇也可以用于rbd和rbd快照在本地进行合并

实践过程

全量备份的访问方法

rbd在没有做快照的情况下的备份,导出后是一个文件形式的

rbd export testrbd testrbd

使用下面方法进行直接访问

losetup /dev/loop0 testrbd 
kpartx -a /dev/loop0 
mount /dev/mapper/loop0p1 /mnt1/
mount /dev/mapper/loop0p2 /mnt2/

内核块设备使用的时候可以直接进行文件的本地访问,如果是librbd的虚拟机磁盘的形式的直接当raw格式进行直接访问或者传输到OpenStack里面直接访问即可,或者用上面的步骤本地直接访问

增量备份的访问方法

如果使用的是ceph-backup的增量备份,需要离线恢复的话需要一个第三方插件

wget https://github.com/zphj1987/eve4ceph-mdti/archive/master.zip

下载好了后进入代码目录,执行

yum install glib2-devel
yum install glib-devel
make install

执行完了后会生成一个二进制文件,这个 eve4ceph-mdti ,不需要其他配置,直接使用即可

[root@lab244 mnt]# ll /root/test/
total 280
-rw-r--r--. 1 root root 159958 Oct 25 03:10 testrbd@BACKUPUTC20171024T190955.full.tar.gz
-rw-r--r--. 1 root root  60202 Oct 25 03:12 testrbd@BACKUPUTC20171024T191243.diff_from_BACKUPUTC20171024T190955.tar.gz
-rw-r--r--. 1 root root  57568 Oct 25 03:13 testrbd@BACKUPUTC20171024T191358.diff_from_BACKUPUTC20171024T191243.tar.gz

使用ceph-backup生成的是上面的这些压缩包的形式,直接全部解压

[root@lab244 mnt]# ll /root/test/tmp/rbd/testrbd/
total 127788
-rw-r--r--. 1 root root 10737418240 Oct 25 03:30 testrbd@BACKUPUTC20171024T190955.full
-rw-r--r--. 1 root root    19650298 Oct 25 03:12 testrbd@BACKUPUTC20171024T191243.diff_from_BACKUPUTC20171024T190955
-rw-r--r--. 1 root root    18896617 Oct 25 03:13 testrbd@BACKUPUTC20171024T191358.diff_from_BACKUPUTC20171024T191243

解压完成后生成了原始全量镜像和快照增量部分,根据快照时间顺序进行合并

eve4ceph-mdti testrbd\@BACKUPUTC20171024T190955.full testrbd\@BACKUPUTC20171024T191243.diff_from_BACKUPUTC20171024T190955
eve4ceph-mdti testrbd\@BACKUPUTC20171024T190955.full testrbd\@BACKUPUTC20171024T191358.diff_from_BACKUPUTC20171024T191243

执行上面的以后会把快照的差量回滚到全量的那个备份当中

losetup /dev/loop0 testrbd\@BACKUPUTC20171024T190955.full
kpartx -a /dev/loop0
mount /dev/mapper/loop0p1 /mnt
ll /mnt

经过上面的步骤以后,在本地文件系统上面就把增量的部分进行合并了,这里面用到比较关键的一个技术点就是ceph_apply_diff,上面的操作进行了多次增量的备份,数据是按照快照点进行恢复,需要按时间先后顺序把差异合并到第一个full镜像,需要注意的是,做快照如果是librbd,要注意rbd的cache的影响,先flushcache,然后快照,如果是kernel rbd的快照,要注意本地文件系统的缓存的影响

总结

本篇是提供了一种本地恢复增量备份的rbd的方法,在集群之外进行快照的合并,减少了恢复过程对集群的依赖

原文发布于微信公众号 - 磨磨谈(momotan1987)

原文发表时间:2017-11-02

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏ytkah

dedecms首页去掉index.html怎么设置

  很多网友用IIS服务器建站,反映说dedecms首页默认多了一个/index.html,一般是没有这个后缀的,直接就**.com,那么如何将dedecms首...

35650
来自专栏计算机视觉

linux-Anaconda+conda创建python-pytorch虚拟环境

27720
来自专栏我的博客

Windows安装MinGW使用gcc和g++命令

MinGW 是一个可自由使用和自由发布的Windows特定头文件和使用GNU工具集导入库的集合,允许你在GNU/Linux和Windows平台生成本地的Wind...

1.1K130
来自专栏holer

外网访问内网MySQL数据库

本地安装了MySQL数据库,只能在局域网内访问,怎样从外网也能访问本地MySQL数据库?

32010
来自专栏个人翻译

在 Heroku 中部署 Node.js 应用

原文地址:https://dzone.com/articles/deploying-nodejs-on-heroku

297100
来自专栏holer

如何从外网访问局域网Apache HTTP Server

本地安装了Apache HTTP Server,只能在局域网内访问,怎样从公网也能访问本地Apache HTTP Server?

29910
来自专栏Golang语言社区

[Go 语言社区]Golang架构--服务器与客户端自定义传输规则--原创

对于写过架构的童鞋来说,自己封装传输规则也没有任何问题的,本文只是抛砖引玉,简单的说下我曾经和现在服务器使用的传输的规则,敬请看: 对于服务器...

35370
来自专栏腾讯云容器服务团队的专栏

使用腾讯云容器服务来构建简单web service

本文将介绍使用nginx和php来构建简单web service,核心在于如何配置nginx的upstream,使得nginx能够与后端服务通信。

1.7K100
来自专栏weixuqin 的专栏

Maven配置与安装

首先在 maven 官网下载 maven 压缩包:https://maven.apache.org/download.cgi 。

53110
来自专栏大数据-Hadoop、Spark

Unable to connect to zookeeper server within timeout: 6000

1.启动zookeeper 2.启动kafka 3.启动kafka-producer 4.启动kafka-consumer 5.生产一些消息 6.ka...

58560

扫码关注云+社区

领取腾讯云代金券