AOF和RDB | 青训营笔记

84 阅读3分钟

这是我参与「第五届青训营 」伴学笔记创作活动的第 2 天

因为大项目中用到了,就把这两种持久化的方式再复习了一遍

RDB

RDB持久化,就是把当前时间点的数据库的状态保存到磁盘中,又称快照持久化。 RDB可以手动触发,也可以根据服务器配置定期执行。 RDB生成的文件,是一个经过压缩的二进制文件,数据库可以通过该文件还原到该时间点的状态。 Redis提供前台RDB持久化命令SAVE和后台RDB持久化命令BGSAVE,前台执行时,Redis的其他命令会被阻塞,而后台执行时,Redis还可以继续处理客户端的命令请求。 RDB二进制文件中,保存的是键值对数据,采用经过压缩的自定义编码,带校验。通过od命令可以转化为可读。 主从复制时,初始化的全量复制采用RDB文件。

AOF

AOF持久化,全称是Appen Only File,意思是追加的持久化方式,其中保存的是写命令,而非数据。 AOF持久化过程分为命令追加、文件写入、文件同步三个步骤。 命令追加:Redis服务端每执行完一个写命令,都会以AOF协议格式将该写命令追加到服务器状态的aof_buf缓冲区末尾。 文件写入:Redis中,每结束一个事件循环之前,都会调用flushAppendOnlyFile函数,将aof_buf缓冲区中的内容写入到AOF文件。 文件同步:同步sync指的是文件写入到操作系统缓冲区中时,是否直接同步到磁盘中。通过配置,可以选择立即同步、每秒同步、不主动同步而由操作系统控制,这三种同步方式。 Redis优先使用AOF文件来恢复数据。 AOF文件由于存储命令,且没有经过压缩,其体积要大于RDB文件。 AOF文件可以定期采用BGREWRITEAOF重写,减少重复命令、已失效命令,合并命令等。 AOF文件支持后台重写,采用fork子进程的形式实现。子进程带有服务器进程的数据副本,再避免使用锁的情况下保证数据安全性。另外也采用AOF重写缓冲区解决了数据不一致。

优点和缺点

RDB优点

文件体积少,适合做冷备 相比AOF恢复速度更快

RDB的缺点

丢失数据多 fork子进程来做BGSAVE,消耗一定的内存资源

AOF优点

丢失数据少 增加了写缓存区,无需做磁盘寻址,效率高 append-only,也无需做磁盘寻址,效率高

AOF缺点

文件没有压缩体积大 AOF每次都需要写入aod-buf 的操作,开启AOF持久化后,QPS会稍微降低

思考?

为什么redis需要这两种持久化? 记过上面的回顾,可以知道这两种持久化各有各的优点和缺点 存储的内容:RDB存储某一时间点的数据;AOF存储执行的写命令。 文件大小:RDB文件较小;AOF文件较大。 写入方式:RDB可采用前台/后台写入方式;AOF采用每次执行写命令,都将命令存入缓冲区的方式,另外可以定期重写。 数据丢失:RDB丢失从宕机到上一次RDB同步之间的所有数据;AOF根据I/O缓冲区所配置的刷新方式,不丢失或丢失1s或几秒的数据。

小结

根据这些对比,可以看到RDB持久化更适合保存一个时间点的数据,在主从复制或者数据全量异地灾备时,拷贝到其他地方,而AOF持久化由于丢失数据较少,比较适合作为本地备份,在Reids挂掉重启时作为故障恢复。这就是我理解的为什么Redis需要两种持久化方式。