大厂程序员手中的Redis | 青训营笔记

91 阅读4分钟

这是我参与「第五届青训营 」伴学笔记创作活动的第 2 天。

前言

本堂课主要介绍了服务端开发中的Redis应用,主要分为三部分内容:Redis是什么、Redis应用案例、Redis使用注意事项。

一、Redis是什么

为什么需要Redis

  • 数据从单表,演进出了分库分表

  • MySQL从单机演进出了集群

    • 数据量增长

    • 读写数据压力的不断增加

  • 数据分冷热

    • 热数据:经常被访问到的数据
  • 将热数据存储到内存中

Redis基本原理

  1. 数据从内存中读写

  2. 数据保存到硬盘上防止重启数据丢失

  • 增量数据保存到AOF文件

  • 全量数据RDB文件

  1. 单线程处理所有操作命令
image.jpeg

二、Redis应用案例

连续签到

掘金每日连续签到

用户每日有一次签到的机会,如果断签,连续签到计数将归0。

连续签到的定义:每天必须在23:59:59前签到

Key: CC_ _uid. 1165894833417101

value: 252

expireAt:后天的0点

消息通知

用list作为消息队列

  • 使用场景:消息通知。 例如当文章更新时,将更新后的文章推送到ES,用户就能搜索到最新的文章数据

限流

  • 要求1秒内放行的请求为N,超过N则禁止访问

  • Key: comment freq_ _limit 1671356046

    对这个Key调用incr,超过限制N则禁止访问1671356046是当前时间戳

image.jpeg

分布式锁

  • 并发场景,要求一次只能有一个协程执行。执行完成后,其它等待中的协程才能执行。

  • 可以使用redis的setnx实现,利用了两个特性

    • Redis是单线程执行命令

    • setnx只有未设置过才能执行成功

image.jpeg

三、Redis使用注意事项

慢查询场景

  • 容易导致redis慢查询的操作

    (1)批量操作一次性传入过多的key/value,如mset/hmset/sadd/zadd等O(n)操作 建议单批次不要超过100,超过100之 后性能下降明显。

    (2) zset大部分命令都是O(log(n)),当大小超过5k以.上时,简单的zadd/zrem也可能导致慢查询

    (3)操作的单个value过大,超过10KB。 也即,避免使用大Key

    (4)对大key的delete/expire操作也可能导致慢查询,Redis4.0之 前不支持异步删除unlink,大key 删除会阻塞Redis

缓存穿透、缓存雪崩

  1. 缓存穿透:热点数据查询绕过缓存,直接查询数据库

  2. 缓存雪崩:大量缓存同时过期

  • 缓存穿透的危害

    (1)查询一个一定不存在的数据

    通常不会缓存不存在的数据,这类查询请求都会直接打到db,如果有系统bug或人为攻击,那么容易导致db响应慢甚至宕机

    (2)缓存过期时

    在高并发场景下,一个热key如果过期,会有大量请求同时击穿至db,容易影响db性能和稳定。

    同一时间有大量key集中过期时,也会导致大量请求落到db上,导致查询变慢,甚至出现db无法响应新的查询

  1. 如何减少缓存穿透

    (1)缓存空值

    如一个不存在的userlD。这个id在缓存和数据库中都不存在。则可以缓存一个空值,下次再查缓存直接反空值 。

    (2)布隆过滤器

    通过bloom filter算法来存储合法Key,得益于该算法超高的压缩率,只需占用极小的空间就能存储大量key值

  2. 如何避免缓存雪崩

    (1)缓存空值 将缓存失效时间分散开,比如在原有的失效时间基础上增加一个随机值,例如不同Key过期时间,可以设置为10分1秒过期,10分23秒过期, 10分8秒过期。单位秒部分就是随机时间,这样过期时间就分散了。对于热点数据,过期时间尽量设置得长一些,冷门的数据可以相对设置过期时间短一些 。

    (2)使用缓存集群,避免单机宕机造成的缓存雪崩。

引用参考

青训营课程直播 live.juejin.cn/4354/redis