当前位置:   article > 正文

redis数据迁移_redis数据迁移到另一个redis

redis数据迁移到另一个redis

1.需求
需要将一个redis实例中的部分keys,转移到另一个redis实例

2.迁移方案
2.1 源实例与目标实例版本相同
2.1.1 使用dump命令

#!/bin/bash

#redis 源ip
src_ip=127.0.0.1
#redis 源port
src_port=6392

#redis 目的ip
dest_ip=127.0.0.1
#redis 目的port
dest_port=6393

#要迁移的key前缀
key_prefix=test

i=1

redis-cli -h $src_ip -p $src_port keys "${key_prefix}*" | while read key
do
    redis-cli -h $dest_ip -p $dest_port del $key
    redis-cli -h $src_ip -p $src_port --raw dump $key | perl -pe 'chomp if eof' | redis-cli -h $dest_ip -p $dest_port -x restore $key 0
    echo "$i migrate key $key"
    ((i++))
done


2.1.2 使用migrate命令
migrate用法:

MIGRATE host port key destination-db timeout [COPY] [REPLACE] 
1.
起始版本:2.6.0
时间复杂度:This command actually executes a DUMP+DEL in the source instance, and a RESTORE in the target instance. See the pages of these commands for time complexity. Also an O(N) data transfer between the two instances is performed.

迁移脚本

#!/bin/bash

#redis 源ip
src_ip=127.0.0.1
#redis 源port
src_port=6392

#redis 目的ip
dest_ip=127.0.0.1
#redis 目的port
dest_port=6393

#要迁移的key前缀
key_prefix=test

i=1

redis-cli -h $src_ip -p $src_port keys "${key_prefix}*" | while read key
do
    redis-cli -h $src_ip -p $src_port migrate $dest_ip $dest_port $key 0 1000 replace
    echo "$i migrate key $key"
    ((i++))
done


2.2 源实例与目标实例版本不相同
2.2.1 不可行方案
如果源实例与目标实例版本不相同,使用migrate进行迁移的时候会有如下错误:
1935 migrate key esf_common_auth_code_18587656289
(error) ERR Target instance replied with error: ERR DUMP payload version or checksum are wrong
1.
2.
如果源实例与目标实例版本不相同,使用dump进行迁移的时候会有如下错误
(error) ERR DUMP payload version or checksum are wrong
1.
如果源实例与目标实例版本不相同,直接复制rdbw文件搭建从库为有如下报错


5453:S 23 Nov 18:13:14.153 * MASTER <-> SLAVE sync: Flushing old data
5453:S 23 Nov 18:13:14.153 * MASTER <-> SLAVE sync: Loading DB in memory
5453:S 23 Nov 18:13:14.153 # Can't handle RDB format version 8
5453:S 23 Nov 18:13:14.153 # Failed trying to load the MASTER synchronization DB from disk



2.2.2 可行方案
开启源实例aof持久化功能
config set appendonly yes
1.
手动进行aof持久化
bgrewriteaof
1.
新建一个redis实例,与目标实例版本相同并启动
将源实例的redis的aof文件导入新建实例
redis-cli -h 127.0.0.1 -p 6395 -a password --pipe < appendonly.aof
1.
通过dump或者migrate的方式将新实例的key迁移到目标实例
 

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/从前慢现在也慢/article/detail/752162
推荐阅读
相关标签
  

闽ICP备14008679号