Redis-缓存有效期与淘汰策略
Redis-缓存有效期与淘汰策略
- 有效期
- 节省空间
- 做到数据弱一致性,有效期失效后,可以保证数据的一致性
- 过期策略
- Redis过期策略通常有三种:
- 1.定时过期:
- 每个设置过期时间的Key,系统还要生成一个定时器来监听时间并进行清除,但是有一个致命的问题,生成这么多定时器,并且监听非常消耗CPU资源,如果高并发时,同时过期的数据很大时,反而会爆CPU,从而影响主业务的性能
1 setex('a',300,'aval') #设置300s过期2 setex('b',600,'bval') #设置600s过期
- 2.惰性过期:
- 对设置了过期时间的Key,系统不进行监听,当访问这个Key时,才会判断这个Key是否已经过期,如果过期则清除,这种策略虽然可以减轻CPU算力(不用再开线程监听时间),但是如果有些Key一直没有被访问,则就算过期了,由于没有访问,这是也没有对没访问的Key清理,这种数据如果也多了,那内存也就GG了
- 3.定期过期:
- 每隔一段时间,扫描expires字典中一定数量的Key,并清除其中已经过期的Key,通过调整定时扫描的时间间隔和每次扫描的限定耗时,可以再不同情况下使得CPU和内存资源达到最优的平衡效果
- expires字典会保存所有设置了过期时间的Key的过期时间数据,其中,Key是指向键空间中的某个键的指针,value是该键的毫秒精度的UNIX时间戳表示的过期时间,键空间是指Redis集群中保存的所有键
- Redis中同时使用了惰性过期和定时过期两种过期策略
- Redis过期删除采用了定期过期,默认100ms检测一次,随机检测expires字典中的一些数据,检测中遇到过期的Key,则进行删除,当我们向Redis访问时,又触发了Redis惰性删除策略,判定Key是否过期,如果过期直接删掉过期的Key.但是如果很巧,Redis一直抽查不到这个Key,我们也一直没有访问,则这样的僵尸数据,一直在吃内存,数据量多了也不太OK,所以Redis实现了缓存淘汰机制
- 缓存淘汰 eviction
- Redis本身已经实现了缓存淘汰机制:Redis在对于用于缓存的内存不足时,需要新写入且需要申请额外空间的数据,已经内置了几个处理方案
- noeviction:当内存不足以容纳新写入数据时,新写入操作会报错。
- allkeys-lru:当内存不足以容纳新写入数据时,在键空间中,移除最近最少使用的Key
- allkeys-random:当内存不足以容纳新写入数据时,在键空间中,随机移除某个Key
- volatile-lru:当内存不足以容纳新写入数据时,在设置了过期时间的键空间中,移除最近最少使用的Key
- volatile-random:当内存不足以容纳新写入数据时,在设置了过期时间的键空间中,随机移除某个Key
- volatile-ttl:当内存不足以容纳新写入数据时,在设置了过期时间的键空间中,有更早过期时间的Key优先移除
- 在Redis 4.x版本以后支持le LFU策略,最少频率使用
- allkeys-lfu
- volatile-lfu
- LRU
- (Least recently used,最近最少使用):根据数据的历史访问记录来进行淘汰数据,其核心思想是“如果数据最近被访问过,那么将来被访问的几率也更高
- 基本思路:
- 1.新数据插入到列表头部
- 2.每当缓存命中(即缓存数据被访问)则将数据移到列表头部
- 3.当列表满的时候,将列表尾部的数据丢弃
- LFU
- (Least Frequently Used 最近最少使用算法):基于"如果一个数据在最近一段时间内使用次数很少,那么在将来一段时间内被使用的可能性也很小"的思路
- LFU需要定期衰减
- Redis淘汰机制的配置
maxmemory 最大使用内存配置
maxmemory-policy volatile-lru 淘汰策略
Redis-缓存有效期与淘汰策略的更多相关文章
- 缓存的有效期和淘汰策略【Redis和其他缓存】【刘新宇】
缓存有效期与淘汰策略 有效期 TTL (Time to live) 设置有效期的作用: 节省空间 做到数据弱一致性,有效期失效后,可以保证数据的一致性 Redis的过期策略 过期策略通常有以下三种: ...
- Redis数据过期和淘汰策略详解(转)
原文地址:https://yq.aliyun.com/articles/257459# 背景 Redis作为一个高性能的内存NoSQL数据库,其容量受到最大内存限制的限制. 用户在使用Redis时,除 ...
- Redis(二十):Redis数据过期和淘汰策略详解(转)
原文地址:https://yq.aliyun.com/articles/257459# 背景 Redis作为一个高性能的内存NoSQL数据库,其容量受到最大内存限制的限制. 用户在使用Redis时,除 ...
- Redis中的LRU淘汰策略分析
Redis作为缓存使用时,一些场景下要考虑内存的空间消耗问题.Redis会删除过期键以释放空间,过期键的删除策略有两种: 惰性删除:每次从键空间中获取键时,都检查取得的键是否过期,如果过期的话,就删除 ...
- Redis++:Redis 内存爆满 之 淘汰策略
前言: 我们的redis使用的是内存空间来存储数据的,但是内存空间毕竟有限,随着我们存储数据的不断增长,当超过了我们的内存大小时,即在redis中设置的缓存大小(maxmeory 4GB),redis ...
- Redis系列之-—内存淘汰策略(笔记)
一.Redis ---获取设置的Redis能使用的最大内存大小 []> config get maxmemory ) "maxmemory" ) " --获取当前内 ...
- redis键的过期和内存淘汰策略
键的过期时间 设置过期时间 Redis可以为存储在数据库中的值设置过期时间,作为一个缓存数据库,这个特性是很有帮助的.我们项目中的token或其他登录信息,尤其是短信验证码都是有时间限制的. 按照传统 ...
- redis六种内存淘汰策略学习
当客户端会发起需要更多内存的申请,Redis检查内存使用情况,如果实际使用内存已经超出maxmemory,Redis就会根据用户配置的淘汰策略选出无用的key; 当前Redis3.0版本支持的淘汰策略 ...
- LRU工程实现源码(一):Redis 内存淘汰策略
目录 内存淘汰是什么?什么时候内存淘汰 内存淘汰策略 Redis中的LRU淘汰算法 源码剖析 第一步:什么时候开始淘汰key 配置读取 检查时机 getMaxmemoryState 第二步:淘汰哪些k ...
随机推荐
- cube.js 学习(十)cube 来自官方的学习网站
尽管cube.js 包含了一个doc 站点,但是资料不是很全,同时如果查看了cube github 代码中的一些demo的话,发现还是很不错的 但是一些实践没有在文档展现出来,还好我们可以从cube ...
- 【loj2262】【CTSC2017】网络
题目 一颗\(n\)个点的树,求加入一条边点之后两点间最长距离的最小值 : \(n \le 100000\) ; 题解 首先加入边的两个端点一定在直径上面,先\(dfs\)拎出直径来讨论(下标只代表直 ...
- Angular2发送HTTP请求SpringBoot后台跨域问题解决
Angular通过http发送post请求至SpringBoot的Controller,由于同源策略的保护,遇到跨域问题: • 源(origin)就是协议(http).域名(localhost)和端口 ...
- mysql 创建联结
mysql> select * from user; +------+----------+-----------+ | id | name | address | +------+------ ...
- SSH框架整合1
======================web.xml======================= <?xml version="1.0" encoding=" ...
- pdfBox 解析 pdf文件
Spting boot 项目 1.添加依赖 <dependency> <groupId>org.apache.pdfbox</groupId> <artifa ...
- 第06组 Beta版本演示
队名:福大帮 组长博客链接: https://www.cnblogs.com/mhq-mhq/p/12052263.html 作业博客 : https://edu.cnblogs.com/campus ...
- 第06组 Beta冲刺(4/5)
队名:拾光组 组长博客链接 作业博客链接 团队项目情况 燃尽图(组内共享) 组长:宋奕 过去两天完成了哪些任务 继续维护后端代码 继续学习深入python 继续研究匿名拨打电话问题.套牌多结果处理问题 ...
- spring @Transactional 事务注解的坑
1. 在需要事务管理的地方加@Transactional 注解.@Transactional 注解可以被应用于接口定义和接口方法.类定义和类的 public 方法上. 2. @Transactiona ...
- Unity接入微信登录 微信分享 微信支付 支付宝SDK
你将会学到的unity集成SDK游戏中接入微信支付与支付宝支付游戏中接入微信登录与微信分享 目录 mp4格式,大小2.2GB 扫码时备注或说明中留下邮箱 付款后如未回复请至https://shop13 ...