前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >面试官: 两个Redis集群 如何平滑数据迁移

面试官: 两个Redis集群 如何平滑数据迁移

原创
作者头像
冷冷
修改2019-11-05 10:49:17
9010
修改2019-11-05 10:49:17
举报
文章被收录于专栏:冷冷冷冷

问题

由于生产环境的各种原因,我们需要对现有服务器进行迁移,包括线上正在运行的 redis 集群环境 如何去做?

涉及到数据源变动,原有数据如何平滑迁移到新实例,从而可以实现无缝迁移?

方案汇总

基于 redis 自身的RDB/AOF 备份机制
  1. 执行 save\bgsave 触发数据持久化 RDB文件
  2. 拷贝redis备份文件(dump.rdb)到目标机器
  3. 重启目标实例重新load RDB 文件
  • 关于 save/bgsave 的区别

命令

save

bgsave

IO阻塞

同步

异步

复杂度

O(n)

O(n)

缺点

阻塞客户端

需要fork,消耗内存

基于 redis-dump导入导出 json备份

redis-dump 基于JSON 备份还原Redis的数据https://github.com/delano/redis-dump

代码语言:txt
复制
# 导出命令
redis-dump –u 127.0.0.1:6379 > lengleng.json
# 导出指定数据库数据
redis-dump -u 127.0.0.1:6379 -d 15 > lengleng.json
# 如果redis设有密码
redis-dump –u :password@127.0.0.1:6379 > lengleng.json

# 导入命令
< lengleng.json redis-load
# 指定redis密码
< lengleng.json redis-load -u :password@127.0.0.1:6379
基于 redis-shake 实现 redis-cluster 迁移

  redis-shake是阿里云Redis&MongoDB团队开源的用于redis数据同步的工具https://github.com/alibaba/RedisShake。

  • 基于 Docker 创建两个集群
代码语言:txt
复制
docker run --name redis-cluster1 -e CLUSTER_ANNOUNCE_IP=192.168.0.31 -p 8000-8005:7000-7005 -p 18000-18005:17000-17005  pig4cloud/redis-cluster:4.0
代码语言:txt
复制
docker run --name redis-cluster2 -e CLUSTER_ANNOUNCE_IP=192.168.0.31 -p 8000-8005:7000-7005 -p 18000-18005:17000-17005  pig4cloud/redis-cluster:4.0
  • 配置 redis-shake.conf
代码语言:txt
复制
source.type: cluster
source.address: master@192.168.0.31:7000   #配置一个节点自动发现
target.type: cluster
target.address: master@192.168.0.31:8000   #配置一个节点自动发现
  • 执行全量、增量同步
image
image
  • restful监控指标
代码语言:txt
复制
# 用户可以通过restful监控指标查看内部运行状况,默认的restful端口是9320:

http://127.0.0.1:9320/metric  

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • 问题
  • 方案汇总
    • 基于 redis 自身的RDB/AOF 备份机制
      • 基于 redis-dump导入导出 json备份
        • 基于 redis-shake 实现 redis-cluster 迁移
        相关产品与服务
        云数据库 Redis
        腾讯云数据库 Redis(TencentDB for Redis)是腾讯云打造的兼容 Redis 协议的缓存和存储服务。丰富的数据结构能帮助您完成不同类型的业务场景开发。支持主从热备,提供自动容灾切换、数据备份、故障迁移、实例监控、在线扩容、数据回档等全套的数据库服务。
        领券
        问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档