首页
学习
活动
专区
圈层
工具
发布

从MYSQL 数据库归档 到 归档设计

我见到过的,听到过的数据库归档的方法有以下几种 1 数据通过人工的手段来进行清理,直接将表换名字,然后在重建一个新的表,承接数据。...2 数据通过MYSQL dump 或者其他的备份方式,将数据备份出来,在将数据恢复到数据归档库中,然后将备份的数据直接手动清理掉,这样的做法速度也很快,对业务的影响也比较小,基本上可以算是透明的方式了...下面就是一个MYSQL 针对一个数据库表归档的案例(这个案例也是有缺陷的,但目前是秉承着够用就好,以及时间成本的原则) 首先设计一个归档要考虑的问题如下 1 归档表的大小,以及每日最大,或最小的归档数据量...以下以最简单的自动化的方案来讲 下图是基于案例来讲的 因为数据库是MYSQL 所以考虑了归档一次是多大的批量,避免归档数据量过大的时候将生产库hang 死,另外配置表主要的功能是有两个 1 限制一次拷贝和清理的数据量...通过这两个参数双重限制每天的归档的数据量,避免归档的时间太长,影响了备份,或其他操作。

6.6K41
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    在非归档模式下不能更改表空间为备份模式

    Oracle表空间设置为备份模式后,便可以联机对表空间下数据文件进行文件系统级别的copy备份操作,因为期间对表空间的修改都记录到数据库的重做日志文件中。...由此想到数据库如果是非归档模式,那么这个表空间备份模式的时间必须不能超过联机日志被覆盖的时间,才能保证数据的修改不会丢失。 那么Oracle对这种情况是如何择决的呢?...实验表明:Oracle是干脆不让你在非归档模式下开启表空间的备份模式。...01123: cannot start online backup; media recovery not enabled 实验验证如下: 环境:RHEL 6.4 + Oracle 11.2.0.3 1.归档模式下可以开启表空间的备份模式...online log sequence 1876 Next log sequence to archive 1879 Current log sequence 1879 2.修改数据库为非归档模式下

    88320

    WinCC 中使用备份归档,并在需要时自动链接备份归档

    其中单个分段就是一个 SQL 数据库文件,所有分段是 WinCC 所保存的所有的在线归档数据。...经过测试比较,SQL 数据库所能连接的归档片断最大可行的数量为 200 个。归档片断个数不能过多地超过这个数量,否则会影响 Microsoft SQLserver 运行性能。...在弹出的数据库选择”对话框中选择需要断开的归档 断开成功的提示如图 9 所示。...0x80047209 不能复制数据到 'CommonArchiving' 0x8004720A 数据库名称无效 0x8004720B 无数据库列表 0x8004720C 数据库已经断开 0x8004720D...数据库无法断开 0x8004720F 未签名的数据连接 0x80047210 路径错误 断开备份的语法: HMIRuntime.Logging.DataLogs.Remove [TimeFrom]

    8K11

    Linux自动备份mysql数据库|mysql备份

    文章时间:2019年1月31日 08:49:46 作者:余伟同学 说明:利用crotab定时器,实现定时自动备份mysql数据库 更新人 更新时间 更新内容 余伟同学 2019年10月10日...12:30:57 增加复杂版本sh,7天自动删除 安装crotab 安装教程地址:https://wiki.nooss.cn/archives/84.html 编写备份mysql的shell脚本 #简单版本...###################数据库配置信息####################### user=root passwd=root dbname=databases mysql_back_path...-p$passwd $dbname > $mysql_back_path/$time.sql.gz echo '数据库备份完成' find /home/dbback/ -mtime +3 -name..."*.sql.gz*" -exec rm -rf {} \; #删除3天以上的备份sql echo '检查删除过期备份数据库成功' 说明 -u 后面跟的是用户名 -p 后面跟的是密码 datebaes

    27.7K21

    MySQL数据库备份之逻辑备份

    一、MySQL数据库备份之逻辑备份 1.命令简介: # mysqldump -h 服务器 -u用户名 -p密码 数据库名 > 备份文件.sql 1)关于数据库名:   -A, --all-databases...停止数据库   【systemtl stop mysqld 】 2. 清理环境     【rm -rf /var/lib/mysql/*;】 3....启动数据库    【初始密码 /var/log/mysqld.log】 4. 重置密码     【新密码 】 5. mysql恢复数据  【新密码 】 6....刷新授权     【备份时密码 】 注:如果不是一个新的数据库环境,我们需要从第一步开始,如果已经是一个新的数据环境,我们可以直接从第5步执行。...[root@localhost ~]# 可以看到它恢复到了备份点,刚才创建的表t2是在备份点之后生成的,可以看到表中没有t2: mysql> show databases; +------------

    15.7K10

    Mysql数据库定时备份

    Mysql数据库定时备份 背景 首先我不是DBA,我只是个后端开发,有一个自己的网站,突然有一天,听到有个同学说,他们数据库被黑了,别人黑完删库跑路了,请教我怎么恢复,同学是非开发人员,其实我很想说我也不会...我快速百度了下怎么恢复,网上教我们的手段一般有: 数据库备份了么? 同学说没有,pass。 日志开启了么? 同学说没有,pass。 你数据库是MyIsam,看看黑客有没有把文件转移?...所以,我赶紧把我的mysql数据库备份了一下,用最简单的方式。 内容过于简单,可能会引起部分人群不适。...简单备份 mysqldump -u root -p feiyun > feiyun.sql.20190507 这里,feiyun 是数据库名,-u 是指定用户名, -p是输入密码 , -> 重定向到文件...定时备份 cron中添加一个作业 # crontab –e 0 1 * * * /root/dump/backup.sh 每天1点执行下backup.sh backup.sh: #!

    6.5K30

    Mysql数据库定时备份

    MySQL数据备份 mysqldump命令备份数据 在MySQL中提供了命令行导出数据库数据以及文件的一种方便的工具mysqldump,我们可以通过命令行直接实现数据库内容的导出dump,首先我们简单了解一下...mysqldump命令用法: #MySQLdump常用 mysqldump -u root -p --databases 数据库1 数据库2 > xxx.sql mysqldump常用操作示例 备份全部数据库的数据和结构.../mydb.sql 备份单个数据库的数据和结构(,数据库名mydb) mysqldump -uroot -p123456 mydb > /data/mysqlDump/mydb.sql 备份单个数据库的结构.../mydb.sql 还原mysql备份内容 有两种方式还原,第一种是在MySQL命令行中,第二种是使用SHELL行完成还原 在系统命令行中,输入如下实现还原: mysql -uroot -p123456...以下代码功能就是针对mysql进行备份,配合crontab,实现备份的内容为近一个月(31天)内的每天的mysql数据库记录。

    11.6K20

    Oracle11g设置归档模式和非归档模式

    1、首先查看当前数据库是否处于归档模式 1)select name, log_mode from v$database; log_mode的值为 NOARCHIVELOG 表示数据库处于非归档模式 log_mode...的值为 Enabled 表示数据库已开启归档模式 2、非归档模式的数据库更改为归档模式 1)关闭数据库:shutdown immediate; 2)启动数据库到mount状态:startup mount...; 3)修改数据库为归档模式:alter database archivelog; 4)打开数据库:alter database open; 5)验证:archive log list; 6)选择性修改日志文件命名格式...: select name from v$archived_log; alter system archive log current; 3、归档模式的数据库更改为非归档模式 1)关闭数据库: alter...log list; 或者 select name, log_mode from v$database; 4)更改归档模式为非归档模式:alter database noarchivelog; 5)查看的数据库的归档信息

    2.9K20

    第十九章 : 归档和备份

    归档和备份 One of the primary tasks of a computer system’s administrator is keeping the system’sdata secure...一个常见的,与文件压缩结合一块使用的文件管理任务是归档。归档就是收集许多文件,并把它们捆绑成一个大文件的过程。归档经常作为系统备份的一部分来使用。...模式 说明 c 为文件和/或目录列表创建归档文件。 x 抽取归档文件。 r 追加具体的路径到归档文件的末尾。 t 列出归档文件的内容。...我们可以看到模式 c 和选项 f,其被用来指定这个 tar 包的名字,模式和选项可以写在一起,而且不需要开头的短横线。注意,然而,必须首先指定模式,然后才是其它的选项。...这里我们使用 find 命令来匹配 playground 目录中所有名为 file-A 的文件,然后使用-exec 行为,来唤醒带有追加模式(r)的 tar 命令,把匹配的文件添加到归档文件 playground.tar

    71610

    Oracle 开启归档模式

    Oracle 数据库通常建议开启归档模式,记录数据库操作的记录归档到本地日志文件! 可以通过以下命令查看是否开启归档: archive log list 如图,即已开启归档! 有啥好处呢?...开了归档之后,可以 RMAN 实时备份数据,配置 DataGuard 必须开启归档模式,数据库基本能保证零丢失!...缺点可能就是: 1、占用大量磁盘空间 2、占用部分系统资源 3、如果归档空间满了,可能导致数据库宕机 总的来说,利大于弊,现在谁还差那么点磁盘空间和系统资源呢?对吧!...开启归档模式的步骤: 1、设置归档路径 alter system set log_archive_dest_1='LOCATION=/archivelog'; 这个 /archivelog 目录需要是磁盘中物理存在的路径...3、打开归档模式,打开数据库到 open alter database archivelog; alter database open; 4、检查归档状态,切换日志 archive log list alter

    1.9K40

    MySQL数据库备份实操

    全量备份 全量备份基本模式: 进入到mysql容器中 创建备份目录 通过mysqldump命令,执行数据库逻辑备份操作,将结果输出到 sql文件中。...,保持备份数据一致性 --master-data=2 表示在备份过程中记录主库的binlog和pos点,并且在dump文件中注释改行 --all-databases 导出所有数据库,包括mysql库 全量恢复...mysql -h localhost -u root -p < /data/backups/dmp/dmp1.sql 其他备份 1、导出指定数据库的指定表: --databases 指定备份的数据库 -...当前xtrabackup的8.0.13已经支持 mysql 8.0.20版本(8.0.20版本对innodb的数据文件模式进行了修改) 程序安装 与mysql环境一样,需要将xtrabackup安装到...:/etc/mysql # 重启mysql数据库 docker restart mysql-dump-test # 查看日志情况 docker logs mysql-dump-test 参考资料 欢迎关注我的公众号

    1.5K40

    使用Xtrabackup备份MySQL数据库

    MySQL数据库备份工具 Xtrabackup有如下几大特点: (1)备份过程快速、可靠; (2)备份过程不会打断正在执行的事务; (3)能够基于压缩等功能节约磁盘空间和流量; (4)自动实现备份检验...---- 下面演示使用Xtrabackup对CentOS7系统上的MySQL数据库进行备份 先提前下载CentOS7版本的Xtrabackup RPM安装包 https://www.percona.com...7、接下来使用xtrabackup进行一次数据库的全量备份 创建数据库备份文件存放目录并使用xtrabackup的命令innobackupex进行全量备份 mkdir /backup innobackupex...chown -R mysql.mysql /usr/local/mysql/data/ 修改属主属组为mysql.mysql 重启mysqld服务后登录数据库验证数据库是否完全还原回来 ?...可以看到数据库全量备份还原成功 以上是Xtrabackup全量备份操作,下次介绍一下利用Xtrabackup进行增量备份

    2.4K80
    领券