出发点
因为线上多机房，然后有一个机房历史原因使用了Codis，这样就导致开发、QA、线上环境在缓存软件这块有点差异，为了因为这种差异化的东西，导致开发出来的软件对接缓存应用导致不同表现情况的话，线上统一用一个版本的Redis版本避免此问题。
搭建环境
安装Redis实例
yum install -y gcc gcc-c++ make autoconf automake libtool
mkdir -p /data/src
cd /data/src
wget -c http://download.redis.io/releases/redis-2.8.18.tar.gz
tar xf redis-2.8.18.tar.gz
cd redis-2.8.18
make
make PREFIX=/data/app/redis install
mkdir -p /data/logs /data/appData/redis
配置配置文件:
cat > /data/app/redis/redis.conf << _EOF_
daemonize yes
pidfile /var/run/redis.pid
port 6379
timeout 0
loglevel notice
logfile /data/logs/redis.log
databases 16
dir /data/appData/redis
slave-serve-stale-data yes
appendonly no
appendfsync everysec
no-appendfsync-on-rewrite no
auto-aof-rewrite-percentage 100
auto-aof-rewrite-min-size 64mb
slowlog-log-slower-than 10000
slowlog-max-len 1024
list-max-ziplist-entries 512
list-max-ziplist-value 64
set-max-intset-entries 512
zset-max-ziplist-entries 128
zset-max-ziplist-value 64
activerehashing yes
_EOF_
启动:
/data/app/redis/bin/redis-server /data/app/redis/redis.conf
echo '/data/app/redis/bin/redis-server /data/app/redis/redis.conf' >> /etc/rc.local
安装迁移工具redis-migrate-tool
cd /data/src
git clone https://github.com/vipshop/redis-migrate-tool.git
cd redis-migrate-tool
autoreconf -fvi
./configure
make
cp src/redis-migrate-tool /usr/bin
配置
redis-migrate-tool 配置:
[source]
type: single
servers:
- 192.168.1.100:6379
- 192.168.1.100:6380
[target]
type: single
servers:
- 127.0.0.1:6379
[common]
listen: 0.0.0.0:8888
mbuf_size: 1024
192.168.1.100:6379和192.168.1.100:6380 指的是Codis每个Group的master，即源实例。
127.0.0.1:6379 指的是迁移后的Redis实例，即目标实例。
简单解释下原理:
redis-migrate-tool 会作为 Codis 每个 Group 的 master 的 slave，接收到的数据以客户端的形式写入目标实例
迁移
启动 redis-migrate-tool:
redis-migrate-tool -c rmt.conf -o rmt.log -d
观察 rmt.log 知道输出
All nodes' rdb file parsed finished for this write thread(0).
通知状态页和 dbsize 确定 Key 数量是否一致 (初始同步完成) 执行 redis-cli -p 8888 info 确认
# 为 1
all_rdb_received:1
all_rdb_parsed:1
# Codis group 数量
rdb_received_count:2
rdb_parsed_count:2
配置服务连接 Redis 实例，检查 Codis 连接，知道所有连接断开，执行 redis-cli -p 8888 info 确认
# 为1
all_rdb_received:1
all_rdb_parsed:1
# Codis group 数量
rdb_received_count:2
rdb_parsed_count:2
# 一致
total_msgs_recv:27005
total_msgs_sent:27005
# 为0
total_mbufs_inqueue:0
total_msgs_outqueue:0
关闭 redis-migrate-tool
redis-cli -p 8888 shutdown
最后下架你的Codis机器即可，此方法你还可以原始至Redis到Redis之间的迁移，可以实践测试，注意支持的数据类型。
调研作者: https://antonchen.com/
本文由 空心菜 创作，采用 知识共享署名4.0 国际许可协议进行许可
本站文章除注明转载/出处外，均为本站原创或翻译，转载前请务必署名
最后编辑时间为: Jul 30, 2018 at 11:28 am