前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >Redis AOF持久化文件越来越大这么办?

Redis AOF持久化文件越来越大这么办?

作者头像
dys
发布2018-04-02 16:50:10
3.5K0
发布2018-04-02 16:50:10
举报
文章被收录于专栏:性能与架构性能与架构

AOF持久化是通过保存写命令来记录数据库状态的,所以AOF文件中的内容会越来越多,文件的体积也会越来越大,如果不加以控制的话,体积过大的 AOF文件很可能对Redis服务器、甚至整个宿主计算机造成影响,并且AOF文件的体积越大,使用AOF文件来进行数据还原所需的时间就越多

示例:

redis> RPUSH list "A" "B"

结果:["A", "B"]

redis> RPUSH list "C"

结果:["A", "B", "C"]

redis> RPUSH list "D" "E"

结果:["A", "B", "C", "D", "E"]

redis> LPOP list

结果:["B", "C", "D", "E"]

redis> LPOP list

结果:["C", "D", "E"]

AOF文件需要保存每条命令,从最后结果来看,很明显,其中有的命令是无意义的,因为它们不影响数据库状态

为了解决AOF文件体积膨胀的问题,Redis提供了AOF文件重写(rewrite)功能,创建一个新的AOF文件来替代现有的AOF文件,新旧文件所保存的数据库状态相同,但新AOF文件不会包含任何冗余命令,所以体积会比旧的小得多

AOF重写的实现原理

例如上面的例子,如果想要用尽量少的命令来记录list键的状态,那么最简单高效的办法不是去读取和分析现有AOF文件的内容,而是直接从数据库中读取键list的值,然后执行

RPUSH list "C" "D" "E"

这一条命令就可以代替之前的5条命令,就可以将保存list键所需的命令从5条减少为一条了

实现原理:首先从数据库中读取键现在的值,然后用一条命令去记录键值对,代替之前记录这个键值对的多条命令

AOF后台重写

重写会进行大量的写入操作,会阻塞服务器线程,无法处理新的命令请求

为解决这个问题,Redis将AOF重写程序放到子进程里执行,这样,父进程就可以继续处理命令请求

但同时也会产生一个新的问题,子进程在进行AOF重写期间,服务器进程还需要继续处理命令请求,而新的命令可能会对现有的数据库状态进行修改,从而产生数据库状态不一致

为了解决数据不一致问题,Redis服务器设置了一个AOF重写缓冲区,这个缓冲区在服务器创建子进程之后开始使用,当服务器执行完一个写命令之后,它会将这个写命令发送给AOF重写缓冲区

当子进程完成AOF重写工作之后,它会向父进程发送一个信号,父进程在接到该信号之后,会调用信号处理函数,执行以下工作:

1)将AOF重写缓冲区中的所有内容写入到新AOF文件中,这时新AOF文件与当前的数据库状态一致

2)对新的AOF文件进行改名,原子地覆盖现有的AOF文件,完成新旧两个AOF文件的替换

在整个AOF后台重写过程中,只有信号处理函数执行时会对服务器造成阻塞

本文参与 腾讯云自媒体分享计划,分享自微信公众号。
原始发表:2015-08-21,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 JAVA高性能架构 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体分享计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
相关产品与服务
云数据库 Redis
腾讯云数据库 Redis(TencentDB for Redis)是腾讯云打造的兼容 Redis 协议的缓存和存储服务。丰富的数据结构能帮助您完成不同类型的业务场景开发。支持主从热备,提供自动容灾切换、数据备份、故障迁移、实例监控、在线扩容、数据回档等全套的数据库服务。
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档