专栏首页二狗的DBA之路使用 redis-shake 迁移 redis-cluster集群

使用 redis-shake 迁移 redis-cluster集群

使用 redis-shake 迁移 redis-cluster

背景:

    IDC上云, 有2套redis-cluster需要迁移到云上。 这里我们使用 redis-shake 来做迁移操作。

模拟机房集群(图是我后截的,图上已经有key了): 

模拟云上集群(图是我后截的,图上已经有key了): 

迁移前, redis-cluster 我们先造点数据进去到机房集群去。脚本如下:

for i in {1..10000}; do 
  echo "set age$i  $i" | redis-cli -c -h 172.31.1.133 -p 6391
done

然后,先找出老的redis cluster的master节点信息, redis-shake迁移要用到。如下:

echo 'cluster nodes' | redis-cli -c -h 172.31.1.133 -p 6391 | egrep master 

1154ebeb83a53ad7ac09d14b49f4ec28af91e1e5 172.31.1.133:6392@16392 master - 0 1571397581506 13 connected 4097-8193
248a9d4e2ab4da9875c2ff2fb9c222be0b07deb7 172.31.1.134:6393@16393 master - 0 1571397583018 2 connected 8194-12290
94d42bffd85e4c8acf49c64b182023e9381805aa 172.31.1.134:6352@16352 master - 0 1571397582508 11 connected 12291-16383
1dd160e9fbfe4bb5d8c251053c9d7b752b23d317 172.31.1.134:6353@16353 master - 0 1571397582608 10 connected 0-4096

我这里的是如下4个节点为master:

172.31.1.133:6392;172.31.1.134:6393;172.31.1.134:6352;172.31.1.134:6353

然后,找出 新的redis cluster 的master节点信息,redis-shake迁移要用到。如下:

echo 'cluster nodes' | redis-cli -h 172.31.1.133 -p  6394 | egrep master 

9a81aecf9ad5d2bb6104134107215b528476eec6 172.31.1.134:6397@16397 master - 0 1571398028000 1 connected 8194-12290
2b1bf7f11258ac363962c6216d19687e2d9e6bbe 172.31.1.133:6397@16397 master - 0 1571398027348 4 connected 12291-16383
3aec1bed303b228290886eb21af0a9907f4c22c9 172.31.1.134:6396@16396 master - 0 1571398025000 5 connected 4097-8193
d8173ea22c504639e3102991876edd401ec4f3d9 172.31.1.133:6394@16394 myself,master - 0 1571398027000 0 connected 0-4096

我这里的是如下4个节点为master:

172.31.1.134:6397;172.31.1.133:6397;172.31.1.134:6396;172.31.1.133:6394

然后,编辑 redis-shake 的配置

vim redis-shake.conf  修改source部分和target部分的内容如下:

source.type = cluster
source.address = 172.31.1.133:6392;172.31.1.134:6393;172.31.1.134:6352;172.31.1.134:6353
source.password_raw = 
source.auth_type = auth
target.type = cluster
target.address = 172.31.1.134:6397;172.31.1.133:6397;172.31.1.134:6396;172.31.1.133:6394
target.password_raw =
target.auth_type = auth
target.db = -1

启动迁移进程:

./redis-shake.linux -type sync -conf redis-shake.conf

下图是迁移过程中,redis-shake的日志(最后一行就是写入到目标redis cluster的数据量瞬时值)

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

我来说两句

0 条评论
登录 后参与评论

相关文章

  • MySQL 找出体积最大的10个表

    我们还可以用python脚本将这些采集到的数据按行插入到远程数据库中,或者json格式上送到数据库运维平台的接口达到metrics入库的目的。

    二狗不要跑
  • 给redis cluster集群加上认证功能

    接上一篇博客:http://lee90.blog.51cto.com/10414478/1863242

    二狗不要跑
  • MHA部署笔记(centos6+mysql5.6)

        MHA版本:mha4mysql-manager-0.56-0.el6.noarch.rpm mha4mysql-node-0.56-0.el6.noar...

    二狗不要跑
  • AngularJS API之copy深拷贝

    angular提供了一个可以复制对象的api——copy(source,destination),它会对source对象执行深拷贝。 使用时需要注意下面几...

    用户1154259
  • Unsupervised learning and generative models

    来自deepmind大神的演讲,https://www.youtube.com/watch?v=H4VGSYGvJiA,首先是五种对于数据分布的操作,非常有借鉴...

    用户1908973
  • react-router 环境使用锚点的方法

    我与梦想有个约会
  • react-router 环境使用锚点的方法

    我与梦想有个约会
  • java多线程开发容易犯的错误

          昨天在社区上看到有人讨论多线程使用,多线程遇到一些问题以及一些使用技巧记录一下。为什么要使用多线程, 不能是为了用而用,和设计模式一样用的合理,会让...

    杉枫
  • TiDB Ecosystem Tools 原理解读系列(三)TiDB-DM 架构设计与实现原理

    TiDB-DM(Data Migration)是用于将数据从 MySQL/MariaDB 迁移到 TiDB 的工具。该工具既支持以全量备份文件的方式将 MySQ...

    PingCAP
  • 编程小知识之生成排列

    生成排列的方法不少,一种经典的方法就是采用递归,假设我们需要求解 1 ~ n 的所有排列,那么我们假设已经求解了 1 ~ n - 1 的所有排列,然后对于求解出...

    用户2615200

扫码关注云+社区

领取腾讯云代金券