linux之 redis 的rdb 转 aof 及主从复

redis持久化
RDB
基于快照的持久化
通过save命令，强制持久化 
在redis.conf中
dbfilename  dbmp.rdb
save  900 1
save 300 10
save 60  10000

 

AOF
将修改命令，全部收集写入到一个aof文件中
appendonly yes
appendfsync  everysec   #每秒钟记录一次变化

 

RDB数据切换AOF数据的操作
1.准备redis.conf配置文件，确保开启rdb功能,配置参数如下

 port 6379
 daemonize yes
 pidfile /data/redis.pid
 loglevel notice
 logfile "/data/redis.log"
 dir /data/
 dbfilename  dbmp.rdb
 save  900 1
 save 300 10
 save 60  10000
2.启动redis服务端
 redis-server redis.conf
3.插入redis数据，通过save命令，强制写入持久化rdb文件(此时还是使用rdb持久化)
 set name shahe
 set age 11
 save 
 
4.通过命令，切换到aof持久化，（注意此步只是临时生效，必须将AOF的配置，写入redis.conf）
127.0.0.1:6379> CONFIG set appendonly yes   #开启AOF功能
OK
127.0.0.1:6379> CONFIG SET save ""  #关闭RDB功能
OK

5.修改配置文件，添加aof参数，(此步重启后，rdb持久化完全切换aof持久化，且数据保持一致)

port 6379
daemonize yes
pidfile /data/redis.pid
loglevel notice
logfile "/data/redis.log"
dir /data/
appendonly yes
appendfsync  everysec

6.重启redis服务

********************************************************************************************************

redis主从复制：
1.环境准备3个redis实例
redis-6380.conf
redis-6381.conf
redis-6382.conf
    三个配置文件的区别，仅仅是端口的不同修改即可
port 6380
daemonize yes  
pidfile /data/6380/redis.pid
loglevel notice
logfile "/data/6380/redis.log"
dbfilename dump.rdb
dir /data/6380
protected-mode no

2.启动三个redis实例
redis-server 6380.conf
redis-server 6381.conf
redis-server 6382.conf

3.此时可以查看redis身份信息，通过info参数()此时还未配置主从，因此都是master身份
redis-cli -p 6382 info Replication
redis-cli -p 6381 info Replication
redis-cli -p 6380 info Replication

4.配置从节点的身份(6380为主，6381,6382为从)，通过命令指明master节点信息即可
127.0.0.1:6381> SLAVEOF 127.0.0.1 6380

127.0.0.1:6382> SLAVEOF 127.0.0.1 6380

5.查看各个各个节点的身份信息
redis-cli -p 6382 info Replication  从节点
redis-cli -p 6381 info Replication    从节点
redis-cli -p 6380 info Replication  ()主节点

 

#手动切换主从身份
1.将主节点挂掉
kill -9 主节点 6380

2.将6382去掉slave的身份
redis-cli -p 6382 slaveof no one

3.将6381设置新的主人，设置为6382
redis-cli -p 6381 slaveof 127.0.0.1 6382

 

#通过配置文件，决定主从身份
1.在配置文件中，添加一条参数即可(主节点不做配置，从节点指明主人的ip端口信息即可)
port 6380
daemonize yes
pidfile /data/6380/redis.pid
loglevel notice
logfile "/data/6380/redis.log"
dbfilename dump.rdb
dir /data/6380
protected-mode no
slaveof 127.0.0.1 6381

 

 

 

 

 

redis不重启，切换RDB备份到AOF备份

 

确保redis版本在2.2以上

[root@pyyuc /data 22:23:30]#redis-server -v
Redis server v=4.0.10 sha=00000000:0 malloc=jemalloc-4.0.3 bits=64 build=64cb6afcf41664c

本文在redis4.0中，通过config set命令，达到不重启redis服务，从RDB持久化切换为AOF

实验环境准备

redis.conf服务端配置文件

daemonize yes
port 6379
logfile /data/6379/redis.log
dir /data/6379
dbfilename  dbmp.rdb
save 900 1                    #rdb机制 每900秒 有1个修改记录
save 300 10                    #每300秒        10个修改记录
save 60  10000                #每60秒内        10000修改记录

启动redis服务端

redis-server redis.conf

登录redis-cli插入数据，手动持久化

127.0.0.1:6379> set name chaoge
OK
127.0.0.1:6379> set age 18
OK
127.0.0.1:6379> set addr shahe
OK
127.0.0.1:6379> save
OK

检查RDB文件

[root@pyyuc /data 22:34:16]#ls 6379/
dbmp.rdb  redis.log

备份这个rdb文件，保证数据安全

[root@pyyuc /data/6379 22:35:38]#cp dbmp.rdb /opt/

执行命令，开启AOF持久化

127.0.0.1:6379> CONFIG set appendonly yes   #开启AOF功能
OK
127.0.0.1:6379> CONFIG SET save ""  #关闭RDB功能
OK

确保数据库的key数量正确

127.0.0.1:6379> keys *
1) "addr"
2) "age"
3) "name"

确保插入新的key，AOF文件会记录

127.0.0.1:6379> set title golang
OK

此时RDB已经正确切换AOF，注意还得修改redis.conf添加AOF设置，不然重启后，通过config set的配置将丢失

redis主从同步

原理：
1. 从服务器向主服务器发送 SYNC 命令。
2. 接到 SYNC 命令的主服务器会调用BGSAVE 命令，创建一个 RDB 文件，并使用缓冲区记录接下来执行的所有写命令。
3. 当主服务器执行完 BGSAVE 命令时，它会向从服务器发送 RDB 文件，而从服务器则会接收并载入这个文件。
4. 主服务器将缓冲区储存的所有写命令发送给从服务器执行。

-------------
1、在开启主从复制的时候，使用的是RDB方式的，同步主从数据的
2、同步开始之后，通过主库命令传播的方式，主动的复制方式实现
3、2.8以后实现PSYNC的机制，实现断线重连

环境准备

6380.conf

1、环境：
准备两个或两个以上redis实例

mkdir /data/638{0..2}  #创建6380 6381 6382文件夹

配置文件示例：
vim   /data/6380/redis.conf
port 6380
daemonize yes
pidfile /data/6380/redis.pid
loglevel notice
logfile "/data/6380/redis.log"
dbfilename dump.rdb
dir /data/6380
protected-mode no

6381.conf

vim   /data/6381/redis.conf
port 6381
daemonize yes
pidfile /data/6381/redis.pid
loglevel notice
logfile "/data/6381/redis.log"
dbfilename dump.rdb
dir /data/6381
protected-mode no

6382.conf

port 6382
daemonize yes
pidfile /data/6382/redis.pid
loglevel notice
logfile "/data/6382/redis.log"
dbfilename dump.rdb
dir /data/6382
protected-mode no

启动三个redis实例

redis-server /data/6380/redis.conf
redis-server /data/6381/redis.conf
redis-server /data/6382/redis.conf

主从规划

主节点：6380
从节点：6381、6382

配置主从同步

6381/6382命令行

redis-cli -p 6381
SLAVEOF 127.0.0.1 6380  #指明主的地址

redis-cli -p 6382
SLAVEOF 127.0.0.1 6380  #指明主的地址

检查主从状态

从库：

127.0.0.1:6382> info replication
127.0.0.1:6381> info replication

主库：

127.0.0.1:6380> info replication

测试写入数据，主库写入数据，检查从库数据

主
127.0.0.1:6380> set name chaoge

从
127.0.0.1:6381>get name 

手动进行主从复制故障切换

#关闭主库6380redis-cli -p 6380
shutdown

检查从库主从信息，此时master_link_status:down

redis-cli -p 6381
info replication

redis-cli -p 6382
info replication

既然主库挂了，我想要在6381 6382之间选一个新的主库

1.关闭6381的从库身份

redis-cli -p 6381
info replication
slaveof no one

2.将6382设为6381的从库

6382连接到6381：
[root@db03 ~]# redis-cli -p 6382
127.0.0.1:6382> SLAVEOF no one
127.0.0.1:6382> SLAVEOF 127.0.0.1 6381

3.检查6382，6381的主从信息