首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

mysql 二进制日志清理

基础概念

MySQL二进制日志(Binary Log)记录了所有的DDL和DML(除了数据查询语句)语句,以事件形式记录,还包含语句所执行的消耗的时间。二进制日志的主要目的是用于复制和数据恢复。

相关优势

  1. 数据恢复:通过二进制日志,可以恢复数据库到某个特定的时间点。
  2. 主从复制:二进制日志是实现MySQL主从复制的关键组件,从服务器通过读取主服务器的二进制日志来同步数据。

类型

MySQL二进制日志有两种格式:

  1. 基于语句的复制(Statement-Based Replication, SBR):记录的是执行的SQL语句。
  2. 基于行的复制(Row-Based Replication, RBR):记录的是每一行数据的变更。
  3. 混合模式复制(Mixed-Based Replication, MBR):默认使用SBR,但在无法精确复制的情况下切换到RBR。

应用场景

  • 数据备份与恢复:通过二进制日志可以实现数据的增量备份和恢复。
  • 主从复制:在主从架构中,二进制日志用于从服务器同步数据。
  • 审计:通过分析二进制日志,可以进行数据库操作的审计。

清理问题

MySQL二进制日志文件会随着时间的推移不断增长,占用大量磁盘空间。因此,需要定期清理。

为什么会这样?

二进制日志文件不会自动删除,除非明确指定或者达到了max_binlog_size配置的大小限制。

原因是什么?

  • 磁盘空间不足:二进制日志文件不断增长,最终可能导致磁盘空间不足。
  • 性能影响:大量的二进制日志文件可能会影响数据库的性能。

如何解决这些问题?

  1. 手动清理
  2. 手动清理
  3. 这条命令会删除所有在mysql-bin.010之前的二进制日志文件。
  4. 设置自动清理: 可以通过设置expire_logs_days参数来自动清理过期的二进制日志文件。
  5. 设置自动清理: 可以通过设置expire_logs_days参数来自动清理过期的二进制日志文件。
  6. 这条命令会设置二进制日志文件在10天后自动删除。
  7. 使用定时任务: 可以编写脚本定期清理二进制日志文件。例如,使用Shell脚本:
  8. 使用定时任务: 可以编写脚本定期清理二进制日志文件。例如,使用Shell脚本:
  9. 然后通过cron任务定期执行这个脚本。

参考链接

通过以上方法,可以有效地管理和清理MySQL的二进制日志文件,确保数据库的正常运行和磁盘空间的合理使用。

页面内容是否对你有帮助?
有帮助
没帮助

相关·内容

MySQL Binlog日志清理

Manipulation Language 数据操控语言:Insert、Delete和Update)操作的二进制日志。...3、MySQL Binlog日志清理(1)查看binlog文件列表show binary logs;(2)查看当前写的binglogshow master status\G(3)方式一:清理除比mysql-bin....000003日志更早的所有binlog日志文件purge binary logs to "mysql-bin.000003";(4)方式二:清理begin_time时间点前的日志purge binary... logs before "$begin_time";日期格式:'2018-02-01 12:00:00';4、MySQL Binlog日志定时清理脚本4.1 背景介绍生产环境中,我们经常会遇到MySQL...【注意】当然MySQL有自带binlog清理机制,通过修改expire_logs_days即binlog过期时间进行控制。但是由于该参数的取值范围是1-31天,所以无法精确清理小时级别的日志。

10110
  • mysql 正确清理binlog日志

    mysq 正确清理binlog日志 前言: MySQL中的binlog日志记录了数据库中数据的变动,便于对数据的基于时间点和基于位置的恢复,但是binlog也会日渐增大,占用很大的磁盘空间,因此,要对...binlog使用正确安全的方法清理掉一部分没用的日志。...【方法一】手动清理binlog 清理前的准备: ① 查看主库和从库正在使用的binlog是哪个文件 ?...1 purge master logs to'mysql-bin.000022'; //删除指定日志文件的日志索引中binlog日志文件 注意: 时间和文件名一定不可以写错,尤其是时间中的年和文件名中的序号...使用该语法,会将对应的文件和mysql-bin.index中的对应路径删除。 【方法二】通过设置binlog过期的时间,使系统自动删除binlog文件 ?

    3.7K10

    MySQL 常见日志清理策略

    因此,定期清理这些日志是必要的,本篇文章我们一起来学习下如何清理 MySQL 中的日志文件。...MySQL 5.7 可以通过 expire_logs_days 参数来设置 binlog 删除时间,在 my.cnf 配置文件中设置 expire_logs_days 参数,指定二进制日志文件的过期天数...在 MySQL 8.0 中建议使用 binlog_expire_logs_seconds 参数,此参数同样是控制二进制文件过期时间,单位是秒。...中继日志 (Relay Log)中继日志是 MySQL 复制过程中用于存储从主服务器接收的二进制日志事件的临时日志文件。这些日志文件由从服务器用来应用来自主服务器的更新。...总结:本篇文章简单介绍了 MySQL 中六种常见日志及其清理策略,不同环境可以采用不同的清理策略,本文只是提供一种思路,方法各种各样,重要的是要根据实际情况制定合理的日志保留策略,并确保不会影响到数据库的正常运行和备份需求

    16410

    MySQL二进制日志

    MySQL 5.5 中对于二进制日志 (binlog) 有 3 种不同的格式可选:Mixed,Statement,Row,默认格式是 Statement。 总结一下这三种格式日志的优缺点。...= 'b' WHERE owner_member_id = 'a' 执行之后,日志中记录的不是这条 update 语句所对应的事件 (MySQL 以事件的形式来记录 bin-log 日志) ,而是这条语句所更新的每一条记录的变化情况...自然,bin-log 日志的量就会很大。尤其是当执行 alter table 之类的语句的时候,产生的日志量是惊人的。...因为 MySQL 对于 alter table 之类的表结构变更语句的处理方式是整个表的每一条记录都需要变动,实际上就是重建了整个表。那么该表的每一条记录都会被记录到日志中。 2....在 Mixed 模式下,MySQL 会根据执行的每一条具体的 SQL 语句来区分对待记录的日志形式,也就是在 statement 和 row 之间选择一种。

    1K50

    ②⑩ 【MySQL Log】详解MySQL日志:错误日志、二进制日志、查询日志、慢查询日志

    MySQL日志:错误日志、二进制日志、查询日志、慢查询日志 1....错误日志 2. 二进制日志 3. 查询日志 4. 慢查询日志 ②⑩ MySQL日志:错误日志、二进制日志、查询日志、慢查询日志 1....二进制日志 - 作用: ①灾难时的数据恢复; ②MySQL的主从复制。...在MySQL8版本中,默认二进制日志是开启着的; 查看二进制日志位置、参数: SHOW VARIABLES LIKE '%log_bin%'; 二进制日志 - 格式: MySQL服务器提供了多种格式来记录二进制日志...以下是清理二进制日志的 3种方式(命令行指令): 也可以在mysql的配置文件中配置二进制日志的过期时间,设置了之后,二进制日志过期会自动删除。

    1.2K10

    MySQL 压缩二进制日志

    ,从节点获取日志时可能会有更多的网络流量,等等。通常,二进制日志压缩效果很好,所以人们一直希望有一个功能可以在MySQL使用二进制日志时对其进行压缩。从MySQL8.0.20开始,现在可以了。...这个例子中,MySQL花费了6.21秒来压缩二进制日志,每个事务平均不到400微秒。相比,二进制日志文件执行I/O花费了4.8分钟。...为了进行比较,我还手工压缩系列测试的中未压缩的二进制日志,以查看最佳压缩率(与MySQL使用的每次事务压缩不同)。除了给定测试所需的设置外,测试都是使用默认配置执行的。...当比较MySQL压缩的二进制日志和使用zstd手工压缩的二进制日志时,批量负载的文件大小大致相同,这也反映出对于大事务,按每个事务进行压缩等同于压缩整个文件。...二进制日志大小与压缩级别的关系 可以看出,无论MySQL中使用的压缩级别如何,文件大小基本上没有差异,而对于zstd,随着压缩级别的增加,文件大小如预期一样减小。

    1.6K81

    MySQL-日志&二进制日志binlog初探

    ---- 二进制日志 : http://www.searchdoc.cn/rdbms/mysql/dev.mysql.com/doc/refman/5.7/en/binary-log.com.coder114...binlog 的主要目的是主从复制和数据恢复 在Master端开启binlog,Master把它的二进制日志传递给slaves来达到master-slave数据一致的目的 数据恢复:通过使用 mysqlbinlog...---- binlog 文件以及扩展 binlog日志包括两类文件: 二进制日志索引文件(文件名后缀为.index)用于记录所有有效的的二进制文件 二进制日志文件(文件名后缀为.00000*)记录数据库所有的...事务被写入到binlog的一个块中,所以它不会在几个二进制日志之间被拆分。...---- binlog的格式 二进制日志中的事件的格式取决于二进制记录格式。

    56320

    mysql binlog日志自动清理及手动删除

    ,x是自动删除的天数,一般将x设置为短点,如10 expire_logs_days = x // 二进制日志自动删除的天数。...,执行以下SQL语句手动清除binlog文件 PURGE MASTER LOGS TO 'MySQL-bin.010'; // 清除MySQL-bin.010日志 PURGE MASTER LOGS...( ), INTERVAL 3 DAY); //清除3天前binlog日志BEFORE,变量的date自变量可以为’YYYY-MM-DD hh:mm:ss’格式。...的影响 如果您有一个活性的从属服务器,该服务器当前正在读取您正在试图删除的日志之一,则本语句不会起作用,而是会失败,并伴随一个错误。...不过,如果从属服务器是休止的,并且您碰巧清理了其想要读取的日志之一,则从属服务器启动后不能复制。当从属服务器正在复制时,本语句可以安全运行。您不需要停止它们。

    7.4K10

    MySQL 二进制日志(Binary Log)

    同大多数关系型数据库一样,日志文件是MySQL数据库的重要组成部分。MySQL有几种不同的日志文件,通常包括错误日志文件,二进制日志,通用日志,慢查询日志,等等。...二进制日志,也叫binary log,是MySQL Server中最为重要的日志之一,本文主要描述二进制日志。...该日志在MySQL 5.1中已不再使用。    d、二进制日志:记录所有更改数据的语句。还用于复制。    ...每个二进制日志名会添加一个数字扩展名用于日志老化,因此不支持自定义的扩展名,会被mysql数字扩展名动态替换。     ...二进制日志文件会有一个对应二进制日志索引文件,该文件包含所有的二进制日志,其文件名与二进制日志相同,扩展名为.index     二进制索引文件通过--log-bin-index[=file_name]

    2K20

    压缩MySQL二进制日志(译文)

    摘要:二进制日志通常会占用大量的磁盘空间,从MySQL 8.0.20开始,可以对MySQL正在使用的二进制日志进行压缩。这篇文章将探讨这个新功能。...在一个繁忙的MySQL服务器上,二进制日志最终可能会成为使用磁盘空间的最大占用者之一。这意味着更高的I/O,更大的备份集(您正在备份二进制日志,对吗?)...,当向从库传输二进制日志时,网络流量会增加,等等。所以长期以来一直希望有一个二进制日志压缩功能,允许对MySQL正在使用的二进制日志进行压缩。从MySQL 8.0.20开始,现在可以了。...在本例中,MySQL总计花了6.21秒进行二进制日志的压缩,每笔事务平均略低于400微秒。相比之下,MySQL总计花了4.8分钟在二进制日志文件上做I/O,这说明压缩在写日志的时间中占比很低。...当将MySQL压缩的二进制日志与手动使用zstd压缩的二进制日志进行比较时,发现批量负载的文件大小大致相同,这说明对于大型事务,对每笔事务压缩和对整个文件压缩效果一样。

    97110

    日志清理问题:日志清理不当,占用大量磁盘空间

    查找大日志文件使用 find 命令查找大日志文件,例如查找大于 100MB 的日志文件。find /var/log -type f -size +100M3....分析日志文件内容查看日志文件的内容,分析是否有异常或不必要的日志记录。cat /path/to/logfile | less tail -n 100 /path/to/logfile4....清理日志文件根据需要清理日志文件。可以删除旧的日志文件或清空日志文件内容。...设置日志轮转使用 logrotate 工具设置日志轮转,自动管理和清理日志文件。编辑 /etc/logrotate.conf 文件,添加或修改日志轮转配置。...检查应用程序日志配置确保应用程序的日志配置合理,避免生成过多的日志文件。编辑应用程序的日志配置文件,调整日志级别和日志文件大小限制。

    14810

    MySQL二进制日志(binary log)总结

    用来记录操作MySQL数据库中的写入性操作(增删改,但不包括查询),相当于sqlserver中的完整恢复模式下的事务日志文件。 二进制日志的作用?   ...1,用于复制,配置了主从复制的时候,主服务器会将其产生的二进制日志发送到slave端,slave端会利用这个二进制日志的信息在本地重做,实现主从同步   2,用户恢复,MySQL可以在全备和差异备份的基础上...二进制日志(binary log)的相关参数信息 1,开启二进制日志  开启二进制日志,需要制定一个log-bin参数的路径,也即:log_bin=/var/lib/mysql/mysql-bin  开始二进制日志之后会自动生成一个管理二进制日志的...max_binlog_size  = 100M  这里显示的104857600单位是字节,也即104857600/1024/1024 = 100M 5,二进制日志的清理 二进制日志滚动之后会生成新的文件来存储日志...暂时没有研究过这个参数,暂不论 总结: MySQL二进制日志不仅仅作用于功能性(master-slave复制)的,还作用于安全性(二进制日志)以及开启了二进制日志情况下的事务性操作,因此对于生产环境,

    1.2K10
    领券