首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

Linux inotify实时备份实现方法详解

实时复制是企业数据备份最重要的方式,主要用于用户提交的数据的备份,对于用户提交到服务器上的普通文件(图片、压缩包、视频、文档等),可采用 inotify/sersync+rsync实时备份方式;对于数据文件还有较复杂的分布式存储工具自身可以实现将数据同时备份成多份...,例如: FastDFS、 GlusterFS等;对于提交到数据库中的数据,可使用数据库的主从复制(例如: MySQL、 Oracle)方式备份,这是软件自带的实时复制备份方式。...模拟实时复制的部署准备 ? 实时复制软件介绍 常用软件:inotify-tools、sersync(推荐) ?...实时复制inotify机制介绍 linux内核从2.6.13起加入了Inotify支持,它是一种异步的系统事件监控机制,通过inotify可以监控文件系统中添加、删除、修改、移动等各种事件,利用这个内核接口...优缺点 inotify优点:监控文件系统事件变化,通过复制工具实现实时数据复制。支持多线程实时复制。 inotify缺点:实测并发如果大于200个文件(10-100k),复制会有延迟。

1.2K21

MySQL实时增量备份

MySQL实时增量备份,采用binlog日志的好处   掌控所有更改操作,必要时可用于恢复数据 数据库主从复制的必要条件 [root@localhost~]# vim /etc/my.cnf [mysqld...  mysqlhotcopy不足     仅适用于MyISAM引擎的数据库     备份过程中,数据插入和更新操作都会被挂起   mysqldump不足     效率较低,备份和还原速度慢     备份过程中...,数据插入和更新操作会被挂起   XtraBackup工具     在线热备份工具     备份过程中不锁表,适合生产环境适用     支持整体备份和增量备份     组件一xtrabackup:C程序...--target-dir 备份到目标文件夹 --datadir 备份的原始文件夹(Mysql库的位置) --prepare 准备恢复数据 --increamental-basedir 增量备份时,指定参照的完整备份路径...+增量备份” 以/backup/mysql/用来重建MySQL服务器,但这种情况下需提前合并相关增量备份的数据: 先准备完整备份目录,添加--apply-log-only仅应用日志: [root@loclahost

2.6K40
您找到你想要的搜索结果了吗?
是的
没有找到

远程rsync实时备份方案脚本

备份往往可以为我们提供一种恢复的策略,因此在实际的生产应用中我们需要对系统的各个配置以及数据进行备份。...这个时候你就后悔莫及了吧,所以提前把系统上的文件数据在远程备份一份吧!这里我们简单介绍以下使用rsync脚本进行远程备份。...准备环境: 首先,想要使用远程备份,必须要让远程主机信任你,让你能够使用ssh无验证登陆。.../bin/bashremotedir=/home/backup 备份到远程主机的目录(必须存在哦)basedir=/backup/ 本地需要备份的目录host=192.168.0.28 备份到远程主机id...现在,你可以放心的将此脚本应用在你的环境了,为了保障系统的实时备份,此时,可以将脚本加入crontab中 [root@node1 backup]# crontab -e */5 * * * * /backup

1.7K10

远程rsync实时备份方案脚本

准备环境: 首先,想要使用远程备份,必须要让远程主机信任你,让你能够使用ssh无验证登陆。...主机无验证登陆node4(28主机) Last login: Sun Jul 20 06:00:26 2014 from 192.168.0.1 [root@node4 ~]# logout 2.本地备份主机编写备份脚本...本地需要备份的目录 host=192.168.0.28                            备份到远程主机 id=root                                                ...现在,你可以放心的将此脚本应用在你的环境了,为了保障系统的实时备份,此时,可以将脚本加入crontab中 [root@node1 backup]# crontab -e */5 * * * * /backup.../rsync.sh > /dev/null ok,现在就会每5分钟进行一次远程备份了!

1.2K90

Linux VPS使用MinIO Client客户端实时同步备份文件

MinIO服务器,也支持同步到Amazon S3、Google云存储,同样的安装十分简单,我们可以拿来同步备份博客或者其他数据文件。...安装 文档地址:https://docs.min.io/ 基本上MinIO服务器和客户端支持在很多系统上安装,比如Windows、macOS等,这里主要说Linux。...1、安装MinIO Client wget https://dl.min.io/client/mc/release/linux-amd64/mc -P /usr/local/bin/ chmod +x...当然这里我们也可以同时实时备份多个文件夹到多个存储桶,自行修改名称就行了。 4、开机自启 新建systemd配置文件,适用CentOS 7、Debian 8+、Ubuntu 16+。...#修改成你需要实时同步备份的文件夹 backup="/www/wwwroot/www.moerats.com" #修改成你要备份到的存储桶 bucket="moerats" #将以下代码一起复制到SSH

6.4K00

Linux数据备份

本文包含: 备份工具 tar、备份命令 cpio、压缩工具 gzip、bzip2与整盘备份工具 dd 1....备份工具 tar 参数 c:建立一个新归档文件 f:指定需要归档的文件 t:列出指定文件的内容 v:以详细模式显示命令执行的过程 x:从归档文件中还原文件 z:通过gzip处理归档文件 j:通过bzip2...处理归档文件 p:保留备份数据的原本属性与权限 例如: 归档test目录,归档名为tets.tar,将命令放到后台执行 # tar -cf test.tar test & 使用gzip压缩归档文件 #...备份命令 cpio 参数 i:使用copy-in模式,还原归档文件或列出归档文件中的文件列表 o:使用copy-out模式,建立归档文件 p:使用copy-pass模式,将文件直接复制到目的目录 c:...压缩工具 gzip、bzip2与整盘备份工具 dd 压缩工具 gzip 参数 c:压缩后将结果输出到终端,并保留原始文件 d:解压缩文件 l:显示压缩文件详细信息 r:递归处理目录下所有文件及子目录

4.7K20

Rsync+sersync实现文件实时备份

第一部分:在目标服务器192.168.0.217上操作 一、在OA文件备份服务器安装Rsync服务端 1、关闭SELINUX vi /etc/selinux/config #编辑防火墙配置文件 代码如下...(停止) systemctl start xinetd(启动) 8.查看是否启动成功 netstat –anutp | grep 873 出现如下数据则为启动成功: Rsync+sersync实现文件实时备份...:: (结果如下图则为成功) Rsync+sersync实现文件实时备份 二、安装sersync工具,实时触发rsync进行同步 1、查看服务器内核是否支持inotify ll /proc/sys/fs...root root 0 Mar 7 02:17 max_user_instances -rw-r--r-- 1 root root 0 Mar 7 02:17 max_user_watches 备注:Linux...sersync/bin mkdir /usr/local/sersync/log tar zxvf sersync2.5_32bit_binary_stable_final.tar.gz cd GNU-Linux-x86

76520

Linux 环境下实战 Rsync 备份工具及配置 rsync+inotify 实时同步

Rsync 是一个开源的快速备份工具,是Linux和UNIX操作系统默认安装的组件之一,可在不同主机间镜像同步整个目录,并支持增量备份文件传输,保持链接和权限,采用优化的同步算法,传输前执行压缩,适用于异地备份...比如:将文件/etc/fstab、目录/boot/grub同步备份到/opt目录下。 -r:选项表示递归整个目录、-l:选项表示备份链接文件。...rsync_backup@192.168.31.108::tmp /mnt/jacktian # service crond restart # chkconfig crond on 4、配置 rsync+inotify 实时同步...Linux 从 2.6.13 版内核开始提供了 inotify 通知接口,用来监控文件系统的各种变化情况,如文件的存取,删除,移动,修改等。...rsync+inotify 可以实现触发式备份,只要原始位置的文档发生变化,则立即启动增量备份,否则处于静默等待状态,避免了按固定周期备份时存在的延迟性,周期过密等问题。

95920

linux Linux系统备份与还原

备份Windows系统不同,如果你要备份Ubuntu系统(或者其它任何Linux系统),你不再需要像Ghost这类备份工具。...事实上,Ghost 这类备份工具对于Linux文件系统的支持很糟糕,例如一些Ghost版本只能完善地支持Ext2文件系统,如果你用它来备份Ext3文件系统,你可能会 丢失一些宝贵的数据。 1....和Windows不同,Linux不会限制root访问任何东西,你可以把分区上的所有东西都扔到一个TAR文件里去!...在 Linux中有一件很美妙的事情,就是你可以在一个运行的系统中恢复系统,而不需要用boot-cd来专门引导。当然,如果你的系统已经挂掉不能启动了, 你可以用Live CD来启动,效果是一样的。...你还可以用一个命令把Linux系统中的所有文件干掉,当然在这里我不打算给出这个命令!

8.3K10

Linux 备份与恢复

# Linux 备份与恢复 # 基本介绍 实体机无法做快照,如果系统出现异常或者数据损坏,后果严重,要重做系统, 还会造成数据丢失。...所以我们可以使用备份和恢复技术 linux备份和恢复很简单,有两种方式: 把需要的文件(或者分区)用TAR打包就行,下次需要恢复的时候,再解压开覆盖即可 使用dump和restore命令 示意图 #...安装dump和restore 如果linux.上没有dump和restore指令,需要先按照 yum -y install dump yum -y install restore # 使用dump完成备份...# 基本介绍 dump支持分卷和增量备份(所谓增量备份是指备份上次备份后修改/增加过的文件,也称差异备份) # dump语法说明 dump [ -cu] [-123456789] [-f<备份后文件名...cat /etc/dumpdates # dump备份文件或者目录 前面我们在备份分区时,是可以支持增量备份的,如果备份文件或者目录,不再支持增量备份,即只能使用0级别备份 案例,使用 dump备份

5.1K10

Linux备份与恢复

所以可以使用备份和恢复技术 linux备份和恢复很简单 , 有两种方式: 1) 把需要的文件(或者分区)用 TAR 打包就行,下次需要恢复的时候,再解压开覆盖即可 2) 使用 dump 和 restore...安装 dump 和 restore [在这里插入图片描述] 如果 linux 上没有 dump 和 restore 指令,需要先安装 yum -y install dump yum -y install...使用 dump 完成备份 3.1 基本介绍 dump 支持分卷和增量备份(所谓增量备份是指备份上次备份后 修改/增加过的文件,也称差异备份)。...-0123456789: 备份的层级。0 为最完整备份,会备份所有文件。若指定 0 以上的层级,则备份至上一次备份以来修改或新增的文件,到 9 后,可以再次轮替.。...,时间 ,日期3.6 查看备份时间文件 cat /etc/dumpdates 3.7 dump 备份文件或者目录 前面在备份分区时,是可以支持增量备份的,如果备份文件或者目录,不再支持增量备份, 即只能使用

5.4K20

Linux备份工具简介

为什么要备份数据? 备份涵盖的范围很广,我们可以备份出一个重要文件的副本,也可以备份出一个完整的磁盘的快照。许多桌面应用程序和操作系统会自动进行数据备份。...快照属于增量备份,这意味着仅保存设备上在最新快照之后有更改的数据,这将尽可能缩短创建快照所需的时间,且可以节省存储成本。 快照的作用 1) 能够进行在线数据的实时副本 快照是对云硬盘的完全可用拷贝。...生产数据的多副本应用:您可以通过创建生产数据快照,为数据挖掘、报表查询、开发测试等应用提供近实时的真实生产数据。 使用控制台创建快照 1) 打开云服务器CVM控制台 。...将username替换为您的Linux用户名并将ip-address替换为您的腾讯云公共IP地址。...第三方工具 免费的命令行工具(如backupninja)和Gnome桌面工具(如sbackup)也可用于创建自定义的自动备份例程。 更多Linux教程请前往腾讯云+社区学习更多知识。

3.7K10

使用 NineData 实现备份集的实时查询

备份实时查询使用前备份实时查询前,需要先使用 NineData 的备份功能,先备份出一个备份集。...假如您已经通过 NineData 的备份功能完成了一个数据库的备份,那么只需要简单的几步,就可以完成实时备份集数据查询。...全量备份集查询:直接查询备份文件(备份集)点击「开始查询」进入到查询页面,在查询页面中可以看到备份文件中的数据库和表对象,并且可以进行相关的查询操作,可以把备份文件实时的使用起来:按时间点查询:全量备份文件...真正做到了“一分钟搞定,永远在线的数据备份”。小结通过这篇介绍,可以了解到如何使用 NineData 快速简单地实现备份集的实时查询。...另外,除了实时备份数据查询外,NineData 在数据备份方面也突破传统技术方案,推出实时日志备份:基于增量日志监听采集技术,实时获取并备份数据库中的变化数据,实现秒级RPO的备份能力,真正做到数据零丢失

64740
领券