二十,Redis持久化

106 阅读3分钟

一,RDB

RDB全称:Redis Database Backup file(Redis数据备份文件),也被叫做Redis数据快照。简单来说就是把内存中的所有数据都记录到磁盘。当Redis实例故障重启后,从磁盘中读取快照文件,恢复数据。

快照文件叫RDB文件,默认保存在Redis当前运行目录。

两种保存方式:

  1. save:由Redis主进程来执行RDB,会阻塞所有命令

    Redis在关机时会自动执行一次save命令。

  2. bgSave:开启子进程执行RDB,避免主进程受到影响


Redis内部有触发RDB的机制,可以在redis.conf文件中找到,格式如下

# 900秒内,如果有至少1个key被修改,则执行bgsave,如果是save ""则表示禁用RDB
save 900 1
# 是否压缩,建议不开启,压缩会消耗cpu
rdbcompression yes
# RDB文件名称
dbfilename dump.rdb
# 文件保存路径目录
dir ./

二,RDB的fork原理

bgsave开始时会fork主进程得到子进程,子进程共享主进程的内容数据,完成fork后读取内存数据并写入RDB文件。

fork采用的是copy-on-write技术:

  • 当主进程执行操作,访问共享内存
  • 当主进程执行操作,则会拷贝一份数据,执行写操作。

image

RDB方式bgsave的基本流程

  • fork主进程得到一个子进程,共享内存空间
  • 子进程读取内存数据并写入新的RDB
  • 用新的RDB文件替换旧的RDB文件

RDB的缺点:

  • RDB执行时间间隔长,两次RDB之间写入数据有丢失风险
  • fork子进程,压缩,写出RDB文件都比较耗时。

三,AOF

AOF全称Append Only File(追加文件)Redis处理的每一个写命令都会记录在AOF文件,可以看做是命令日志文件。

image

AOF默认是关闭的,需要修改redis.conf配置文件来开启AOF

# 是否开启AOF功能,默认是no
appendonly yes
# AOF文件的名称
appendfilename "appendonly.aof"

AOF的命令记录频率也可以通过redis.conf文件来配置

# 表示每执行一次命令,立即写入到AOF文件
appendfsync always
# 写命令执行完先放入AOF缓冲区,然后表示每隔1秒将缓冲区数据写入AOF文件,是默认方案
appendfsync everysec
# 写命令执行完后先放入AOF缓冲区,由操作系统决定何时将缓冲区内容写入磁盘
appendfsync no
配置项刷盘时机优点缺点
Always同步刷盘可靠性高,几乎不丢失数据性能影响大
everysec每秒刷盘性能适中最多丢失1秒数据
no操作系统控制性能最好可靠性较差,可能丢失大量数据

因为AOF是记录所有set命令,会导致aof文件远比rdb文件大,而且AOF会记录对同一个key的多次写操作,但只有最后一次写操作才有意义。通过bgrewriteaof命令,可以让aof文件执行重写功能,用最少的命令达到相同的效果。

image

Redis也会在触发阈值时自动去重写AOF文件,阈值可以在redis.conf中配置

# AOF文件比上次文件增长超过多少百分比则重写
auto-aof-rewrite-percentage 100
# 触发aof rewrite的最小文件尺寸
auto-aof-rewrite-min-size 64mb

四,RDB和AOF对比

RDBAOF
持久化方式定时对整个内存做快照记录每一次执行set命令
数据完整性不完整,两次备份之间会丢失相对完整,取决于刷盘策略
文件大小会有压缩,文件体积小记录命令,文件体积大
宕机恢复速度很快
数据恢复优先级低,因为数据完整性不如AOF高,因为数据完整性更高
系统资源占用高,大量cpu和内存消耗低,主要是磁盘IO资源,但AOF重写时会占用大量cpu和内存资源
使用场景可以容忍数分钟的数据丢失,追求更快的启动速度对数据安全性要求较高的场景