Redis中的Hyperloglog/bitmaps~

133 阅读3分钟

「这是我参与11月更文挑战的第11天,活动详情查看:2021最后一次更文挑战

Hyperloglog

菜鸟教程中的解释:

Redis 在 2.8.9 版本添加了 HyperLogLog 结构。

Redis HyperLogLog 是用来做基数统计的算法,HyperLogLog 的优点是,在输入元素的数量或者体积非常非常大时,计算基数所需的空间总是固定 的、并且是很小的。

在 Redis 里面,每个 HyperLogLog 键只需要花费 12 KB 内存,就可以计算接近 2^64 个不同元素的基 数。这和计算基数时,元素越多耗费内存就越多的集合形成鲜明对比。

但是,因为 HyperLogLog 只会根据输入元素来计算基数,而不会储存输入元素本身,所以 HyperLogLog 不能像集合那样,返回输入的各个元素

Hyperloglog的优点: 占用的内存时固定,2^64不同的元素的技术,只需要废12KB内存!如果要从内存角度来比较的话Hyperloglog 首选!

使用场景:

  • 网页UV
  • 统计注册 IP 数
  • 统计日活/月活
  • 统计在线用户数等。。。 常用命令:
  • 创建数据
 PFADD 组名 value1 value2 ...
  • 统计数组中基数的个数
 PFCOUNT 组名
  • 合并两个已存在的组(并集)
 PFMERGE 结果组名 被合并组1 被合并组2    

使用示例:

#创建第一组数据 mykey
127.0.0.1:6379> PFADD mykey a b c d e f g h i j			
(integer) 1
#统计 mykey 中基数的数量
127.0.0.1:6379> PFCOUNT mykey		
(integer) 10
127.0.0.1:6379> PFADD mykey2 i j z x c v b n m		
(integer) 1
127.0.0.1:6379> PFCOUNT mykey2	
(integer) 9
#合并 mykey 和 mykey2 结果集为 mykey3(并集)
127.0.0.1:6379> PFMERGE mykey3 mykey mykey2		
OK
127.0.0.1:6379> PFCOUNT mykey3		
(integer) 15

如果允许容错,那么一定可以使用Hyperloglog,如果不允许容错就使用set或者自己的数据类型即可!

bitmaps

概述:

  • 通过一个bit位来表示某个元素对应的值或者状态,其中的key就是对应元素本身,value对应0或1,我们知道8个bit可以组成一个Byte,所以bitmap本身会极大的节省储存空间。 使用场景:
  • 统计日活
  • 在线数量
  • 签到打卡

常用命令:

  • 创建位图数据

 SETBIT 数据位名称 标志数 标志数状态
  • 2、查看指定数据位的位图标志数(0或1)
 GETBIT 数据位名称 标志数
  • 3、统计所有位图的标志位为1的个数
 BITCOUNT 数据位名称

使用示例:

一周内的打卡签到情况: 周一:1 周二:0 周三:0 周四:0 周五:1 周六:0 周日:0

#设置week数据位的周一(0)的状态为已签到
127.0.0.1:6379> SETBIT week 0 1				
(integer) 0
#设置week数据位的周二(1)的状态为未签到
127.0.0.1:6379> SETBIT week 1 0
(integer) 0
127.0.0.1:6379> SETBIT week 2 0
(integer) 0
127.0.0.1:6379> SETBIT week 3 0
(integer) 0
127.0.0.1:6379> SETBIT week 4 1
(integer) 0
127.0.0.1:6379> SETBIT week 5 0
(integer) 0
127.0.0.1:6379> SETBIT week 6 0
(integer) 0

查看某一天你是否打卡

#查看周四的打卡情况
127.0.0.1:6379> GETBIT week 3
(integer) 0
#查看周五的打卡情况
127.0.0.1:6379> GETBIT week 4
(integer) 1

统计一周打卡的天数

127.0.0.1:6379> BITCOUNT week		
(integer) 2