前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >Redis哨兵主备切换的数据丢失问题

Redis哨兵主备切换的数据丢失问题

作者头像
JavaEdge
发布2022-11-30 15:10:16
8730
发布2022-11-30 15:10:16
举报
文章被收录于专栏:JavaEdgeJavaEdge

数据丢失的场景

主备切换的过程,可能会导致数据丢失

  • 异步复制 由于 M => R的复制是异步的,所以可能有部分数据还没复制到R,M就宕机,于是这些数据就丢失了
  • 脑裂 某M所在节点突然脱离正常的网络,无法和其他slave机器连接,但实际上master还运行着

此时哨兵可能就会认为M宕机了,然后开启选举,将其他S切换成M。这时,集群里就会有两个M-脑裂

此时虽然某个slave被切换成了master,但是可能client还没来得及切换到新的master,还继续写向旧master的数据可能也丢失了

因此旧master再次恢复时,会被作为一个slave挂到新的master上去,自己的数据会被清空,重新从新的master复制数据

数据丢失的解决方案

如下配置可以减少异步复制和脑裂导致的数据丢失

代码语言:javascript
复制
min-slaves-to-write 1
min-slaves-max-lag 10

配置要求至少有1个slave,数据复制和同步的延迟不能超过10秒

一旦所有的slave,数据复制和同步的延迟都超过了10秒钟,master就不再接收任何请求!

2.1 异步复制数据丢失解决方案

min-slaves-max-lag 配置 即可确保,一旦slave复制数据和ack延时过长,就认为可能master宕机后损失的数据太多了,那么就拒绝写请求 这样就可把master宕机时由于部分数据未同步到slave导致的数据丢失降低在可控范围

2.2 脑裂数据丢失解决方案

若一个master出现了脑裂,跟其他slave失去连接,那么开始的两个配置可以确保 若不能继续给指定数量的slave发送数据,而且slave超过10秒没有给自己ack消息,那么就直接拒绝客户端的写请求

这样脑裂后的旧master就不会接受client的新数据,也就避免了数据丢失

上面的配置就确保了,如果跟任何一个slave丢了连接,在10秒后发现没有slave给自己ack,那么就拒绝新的写请求

因此在脑裂场景下,最多就丢失10秒的数据

本文参与 腾讯云自媒体同步曝光计划,分享自作者个人站点/博客。
原始发表:2019-07-06,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 作者个人站点/博客 前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • 数据丢失的场景
  • 数据丢失的解决方案
    • 2.1 异步复制数据丢失解决方案
      • 2.2 脑裂数据丢失解决方案
      领券
      问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档