Redis中的BigKey相关问题

发布时间:2024年01月19日

什么是bigkey

bigkey是指key对应的value所占用的内存空间比较大。例如一个字符串类型的value可以最大存到512MB,一个列表类型的value最多可以存储2^32-1个元素。如果按照数据结构来细分的话,一般分为字符串类型bigkey和非字符串类型bigkey。
字符串类型:体现在单个value值很大,一般认为超过10kb就是bigkey。
非字符串类型:哈希、列表、集合、有序集合体现在元素个数过多。
bigkey无论在空间复杂度还是时间复杂度都不太友好。

bigkey的危害

bigkey的危害主要体现在四个方面:
(1)内存空间不均匀
例如在Redis Cluster中,bigkey会造成节点的内存空间使用不均匀。
(2)超时阻塞:由于Redis单线程的特性,对元素较多的hash,list,zset做运算会耗时比较久,也就意味着阻塞redis的可能性增加。
(3)网络阻塞:每次获取bigkey产生的网络流量较大。
(4)CPU飙升:对bigkey序列化反序列化导致CPU飙升。

解决bigkey

(1)优雅的kye结构的设计
key可以遵循下面几个约定:
遵循基本格式:[业务名称]:[数据名]:[id]
长度不超过44字节
不包含特殊字符
(2)拆分
对big key存储的数据(big value)进行拆分,变成value1、value2、valuen等等。
例如big value是个大json通过mset的方式,将这个key的内容打散到各个实例中,或者一个hash,每个field代表一个具体属性,通过hget、hmget获取部分value,hset,hmset来更新部分属性。
例如big value是个大list,可以将list拆成多个list。

文章来源:https://blog.csdn.net/weixin_49131718/article/details/135708396
本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。