Redis内存消耗:自身内存 + 对象内存 + 缓冲内存 + 内存碎片
- 自身内存:Redis进程自身内存占用量很小,大约在3.8M左右。
- 对象内存:sizeof(keys) + sizeof(values),键和值的内存都需要关注
- 缓冲内存:主要包括客户端缓冲、复制积压缓冲区、AOF缓冲区
- 客户端缓冲:指所有接入到Redis服务器TCP连接的输入输出缓冲,超过1G会自动断开
- 复制积压缓冲区:用于实现部分复制功能补救措施的缓冲区
- AOF缓冲区:Redis重写期间保存最近的写入命令,消耗内存取决于AOF重写时间及写入命令量
- 内存碎片:Redis默认使用jemalloc分配器、可选glibc、tcmalloc,为了更好的管理和复用内存,一般采用内存块进行分配,通常采用数据对齐或安全重启处理内存碎片超标情况
子进程内存消耗:子进程fork后与父进程享有同一物理内存,AOF/RDB期间父进程处理写请求时会复制出请求的页副本进行写操作,子进程依然读取父进程快照
- Redis fork期间产生的子进程需要消耗的内存由持久化期间写入命令量决定
- 设置sysctl vm.overcommit_memory = 1允许内存分配所有的物理内存
- 排查当前系统是否支持THP,防止copy-on-write期间内存过度消耗
内存管理:Redis通过控制内存上限和回收策略实现内存管理。
- 设置内存上限:Redis使用maxmemory参数限制最大可用内存
- 用于缓存场景,超出上限maxmemory后使用LRU等删除策略释放空间
- 防止所有内存超过服务器物理内存,需要注意由于内存碎片的存在,实际消耗会比maxmemory更大
- 动态调整内存上限
- 当Redis实例设置maxmemory不合理时,可以通过config set maxmemory进行修改
- 内存回收策略
- 删除到达过期时间的键对象:惰性删除(读取到超时的键就删除,减少TTL的消耗)和定时任务删除(每秒执行十次,根据键的过期比例使用快慢两种方式回收键)
- 内存溢出控制策略(maxmemory-policy):noeviction(不删除,拒绝写入)、volatile-lru(LRU删除设置了超时时间的属性)、allkeys-lru(LRU删除不管超时)、allkeys-random(随机删除所有键)、volatile-random(随机删除过期键)、volatile-ttl(根据对象的ttl属性删除即将过期的数据)