Redis数据过期策略详解


Redis数据过期策略详解

本文对Redis的过期机制简单的讲解一下(推荐:redis视频教程)

讲解之前我们先抛出一个问题,我们知道很多时候服务器经常会用到redis作为缓存,有很多数据都是临时缓存一下,可能用过之后很久都不会再用到了(比如暂存session,又或者只存放日行情股票数据)那么就会出现一下几个问题了

Redis会自己回收清理不用的数据吗?

如果能,那如何配置?

如果不能,如何防止数据累加后大量占用存储空间的问题?

之前一直接触Redis不是很深入,最近项目当中遇到一个需求场景,需要清空一些存放在Redis的数据,主要是通过一些时间进行过滤,删除那些不满足的数据,但是这样的工作每天都需要进行,那工作量就比较大了,而且每天都需要按时去手动清理,这样做也不切实际,后面发现Redis中有个设置时间过期的功能,即对存储在Redis数据库中的值可以设置一个过期时间。

作为一个缓存数据库,这是非常实用的。这就是我们本文要讲到的Redis过期机制。其实这个机制运用的场景十分广泛,比如我们一般项目中的token或者一些登录信息,尤其是短信验证码都是有时间限制的,或者是限制请求次数,如果按照传统的数据库处理方式,一般都是自己判断过期,这样无疑会严重影响项目性能。

一、设置过期时间

Redis对存储值的过期处理实际上是针对该值的键(key)处理的,即时间的设置也是设置key的有效时间。Expires字典保存了所有键的过期时间,Expires也被称为过期字段。

expire key time(以秒为单位)--这是最常用的方式

setex(String key, int seconds, String value)--字符串独有的方式

注:

1、除了字符串自己独有设置过期时间的方法外,其他方法都需要依靠expire方法来设置时间

2、如果没有设置时间,那缓存就是永不过期

3、如果设置了过期时间,之后又想让缓存永不过期,使用persist key

1、常用方式

一般主要包括4种处理过期方,其中expire都是以秒为单位,pexpire都是以毫秒为单位的。

EXPIRE key seconds  //将key的生存时间设置为ttl秒
PEXPIRE key milliseconds  //将key的生成时间设置为ttl毫秒
EXPIREAT key timestamp  //将key的过期时间设置为timestamp所代表的的秒数的时间戳
PEXPIREAT key milliseconds-timestamp  //将key的过期时间设置为timestamp所代表的的毫秒数的时间戳

备注:timestamp为unix时间戳(例如:timestamp=1499788800 表示将在2017.07.12过期)

1、2两种方式是设置一个过期的时间段,就是咱们处理验证码最常用的策略,设置三分钟或五分钟后失效,把分钟数转换成秒或毫秒存储到Redis中。

3、4两种方式是指定一个过期的时间 ,比如优惠券的过期时间是某年某月某日,只是单位不一样。

下面我们就以EXPIREAT为例子简单讲解下用法。

返回值

一个整数值1或0,如下:

如果成功地为该键设置了超时时间,返回 1

如果键不存在或无法设置超时时间,返回 0

语法

以下是以Redis的EXPIREAT命令的基本语法。

redis 127.0.0.1:6379> Expireat KEY_NAME TIME_IN_UNIX_TIMESTAMP

示例

首先,在Redis中创建一个键:akey,并在akey中设置一些值。

redis 127.0.0.1:6379> SET akey redis 
OK

现在,为设置创建的键设置超时时间为60 秒。

127.0.0.1:6379> SET akey redis
OK
127.0.0.1:6379> EXPIREAT akey 1393840000
(integer) 1
127.0.0.1:6379> EXISTS akey
(integer) 0
127.0.0.1:6379> SET akey redis
OK
127.0.0.1:6379> EXPIREAT akey 1493840000
(integer) 1
127.0.0.1:6379> EXISTS akey
(integer) 1

1.jpg

其他三个用法类似,这里不逐一阐述

2、字符串独有方式

对字符串特殊处理的方式为SETEX命令,SETEX命令为指定的 key 设置值及其过期时间。如果 key 已经存在, SETEX 命令将会替换旧的值。

返回值

设置成功时返回 OK 。

语法

Redis Setex 命令基本语法如下:

redis 127.0.0.1:6379> SETEX KEY_NAME TIMEOUT VALUE

示例

redis 127.0.0.1:6379> SETEX mykey 60 redis
OK
redis 127.0.0.1:6379> TTL mykey
60
redis 127.0.0.1:6379> GET mykey
"redis

二、3种过期策略

定时删除

含义:在设置key的过期时间的同时,为该key创建一个定时器,让定时器在key的过期时间来临时,对key进行删除

优点:保证内存被尽快释放

缺点:

若过期key很多,删除这些key会占用很多的CPU时间,在CPU时间紧张的情况下,CPU不能把所有的时间用来做要紧的事儿,还需要去花时间删除这些key

定时器的创建耗时,若为每一个设置过期时间的key创建一个定时器(将会有大量的定时器产生),性能影响严重

没人用

惰性删除

含义:key过期的时候不删除,每次从数据库获取key的时候去检查是否过期,若过期,则删除,返回null。

优点:删除操作只发生在从数据库取出key的时候发生,而且只删除当前key,所以对CPU时间的占用是比较少的,而且此时的删除是已经到了非做不可的地步(如果此时还不删除的话,我们就会获取到了已经过期的key了)

Trae国内版 Trae国内版

国内首款AI原生IDE,专为中国开发者打造

Trae国内版 2045 查看详情 Trae国内版

缺点:若大量的key在超出超时时间后,很久一段时间内,都没有被获取过,那么可能发生内存泄露(无用的垃圾占用了大量的内存)

定期删除

含义:每隔一段时间执行一次删除(在redis.conf配置文件设置hz,1s刷新的频率)过期key操作

优点:

通过限制删除操作的时长和频率,来减少删除操作对CPU时间的占用--处理"定时删除"的缺点

定期删除过期key--处理"惰性删除"的缺点

缺点

在内存友好方面,不如"定时删除"

在CPU时间友好方面,不如"惰性删除"

难点

合理设置删除操作的执行时长(每次删除执行多长时间)和执行频率(每隔多长时间做一次删除)(这个要根据服务器运行情况来定了)

看完上面三种策略后可以得出以下结论: 

定时删除和定期删除为主动删除:Redis会定期主动淘汰一批已过去的key

惰性删除为被动删除:用到的时候才会去检验key是不是已过期,过期就删除

惰性删除为redis服务器内置策略

定期删除可以通过:

第一、配置redis.conf 的hz选项,默认为10 (即1秒执行10次,100ms一次,值越大说明刷新频率越快,最Redis性能损耗也越大) 

第二、配置redis.conf的maxmemory最大值,当已用内存超过maxmemory限定时,就会触发主动清理策略

 注意:

上边所说的数据库指的是内存数据库,默认情况下每一台redis服务器有16个数据库(关于数据库的设置,看下边代码),默认使用0号数据库,所有的操作都是对0号数据库的操作,关于redis数据库的存储结构,查看 第八章 Redis数据库结构与读写原理

# 设置数据库数量。默认为16个库,默认使用DB 0,可以使用"select 1"来选择一号数据库
# 注意:由于默认使用0号数据库,那么我们所做的所有的缓存操作都存在0号数据库上,
# 当你在1号数据库上去查找的时候,就查不到之前set过得缓存
# 若想将0号数据库上的缓存移动到1号数据库,可以使用"move key 1"
databases 16

memcached只是用了惰性删除,而Redis同时使用了惰性删除与定期删除,这也是二者的一个不同点(可以看做是redis优于memcached的一点)

对于惰性删除而言,并不是只有获取key的时候才会检查key是否过期,在某些设置key的方法上也会检查(eg.setnx key2 value2:该方法类似于memcached的add方法,如果设置的key2已经存在,那么该方法返回false,什么都不做;如果设置的key2不存在,那么该方法设置缓存key2-value2。

假设调用此方法的时候,发现redis中已经存在了key2,但是该key2已经过期了,如果此时不执行删除操作的话,setnx方法将会直接返回false,也就是说此时并没有重新设置key2-value2成功,所以对于一定要在setnx执行之前,对key2进行过期检查)

三、Redis采用的过期策略

惰性删除+定期删除

惰性删除流程

在进行get或setnx等操作时,先检查key是否过期,

若过期,删除key,然后执行相应操作;

若没过期,直接执行相应操作

定期删除流程(简单而言,对指定个数个库的每一个库随机删除小于等于指定个数个过期key)

遍历每个数据库(就是redis.conf中配置的"database"数量,默认为16)

检查当前库中的指定个数个key(默认是每个库检查20个key,注意相当于该循环执行20次,循环体时下边的描述)

如果当前库中没有一个key设置了过期时间,直接执行下一个库的遍历

随机获取一个设置了过期时间的key,检查该key是否过期,如果过期,删除key

判断定期删除操作是否已经达到指定时长,若已经达到,直接退出定期删除。

四、RDB对过期key的处理

过期key对RDB没有任何影响

从内存数据库持久化数据到RDB文件

持久化key之前,会检查是否过期,过期的key不进入RDB文件

从RDB文件恢复数据到内存数据库

数据载入数据库之前,会对key先进行过期检查,如果过期,不导入数据库(主库情况)

五、AOF对过期key的处理

过期key对AOF没有任何影响

从内存数据库持久化数据到AOF文件:

当key过期后,还没有被删除,此时进行执行持久化操作(该key是不会进入aof文件的,因为没有发生修改命令)

当key过期后,在发生删除操作时,程序会向aof文件追加一条del命令(在将来的以aof文件恢复数据的时候该过期的键就会被删掉)

AOF重写

重写时,会先判断key是否过期,已过期的key不会重写到aof文件 

更多redis知识请关注redis数据库教程栏目。

以上就是Redis数据过期策略详解的详细内容,更多请关注其它相关文章!


# 没有任何  # 网站优化案  # 网站建设排名优化技巧  # 珠海360营销推广  # 怎么在国外网站推广抖音  # 怎么推广全网营销  # 临武网站优化排名  # 上海网站建设深圳公司  # 雷州网站建设推广厂商  # 洛阳个性化网站建设  # 政和效果好的seo公司  # Redis  # 将会  # 时长  # 数个  # 创建一个  # 这是  # 国内  # 设置为  # 就会  # 都是 


相关栏目: 【 Google疑问12 】 【 Facebook疑问10 】 【 优化推广96088 】 【 技术知识133117 】 【 IDC资讯59369 】 【 网络运营7196 】 【 IT资讯61894


相关推荐: 解决Windows上Composer PATH变量冲突导致的命令无法识别问题  教育查询官方网站入口 教育个人档案查询免费官网  腾讯QQ邮箱官方入口 QQ邮箱网页版登录平台  CSS如何在页面中引入重置样式_使用Normalize.css或Reset.css统一浏览器默认样式  照片整理的黄金法则是怎样的? 理解“收集-筛选-归档-备份”四步流程  电脑从睡眠中被自动唤醒怎么办_Windows唤醒源事件查看与禁用【解决】  在React中正确处理HTML input type="number"的数值类型  小红书网页版首页入口 小红书网页版电脑端官方登录链接  j*a中ArrayBlockingQueue的使用  163邮箱登录入口官网 163.com邮箱登录入口  嘀嗒顺风车如何开具电子发票  《地下城堡4:骑士与破碎编年史》墓穴挑战125攻略  cad怎么隐藏指定的图层_cad隐藏或冻结图层方法  《微信》视频号原创声明开启方法  胃动力不足?试试这5个调理方法  如何测试您的网站全球打开速度-网站海外测速工  C++中std::thread和std::async的区别_C++并发编程与线程与异步任务比较  byrutor直接访问入口 byrutor官方游戏库  使用document.execCommand实现Web文本编辑器加粗/取消加粗  菜鸟驿站的取件码忘了怎么办 手机快速查询指南  谷歌浏览器官方镜像获取方法_谷歌浏览器网页版入口极速直达  韩小圈网页版PC端入口 韩小圈网页版官方网站入口  解决CSS background 属性中 cover 关键字的常见误用  快递物流路径揭秘  处理含命名空间的XML文件 Power Query中的高级技巧  抖音网页版地址直接进入_抖音网页版在线观看入口  wps文字怎么设置文字环绕图片的方式_wps文字如何设置文字环绕图片方式  C++ cast类型转换总结_C++ reinterpret_cast与const_cast的使用  解决异步Python机器人中同步操作的阻塞问题  服装短视频如何起号推广?服装短视频起号推广有什么要求?  《红果免费短剧》下载观看方法  《猎聘》筛选猎头岗位方法  抖音评论无法发送如何修复 抖音评论功能操作指南  windows10怎么更改下载路径_windows10默认存储位置修改教程  吃完饭就犯困是什么原因 餐后嗜睡如何缓解  J*a里如何处理ArithmeticException并防止除零_算术异常防护策略解析  钉钉任务无法提醒如何处理 钉钉任务提醒优化方法  芒果TV官网登录入口 芒果TV官方网站登录入口  家里的小飞虫总是不断,用什么方法可以彻底根除?  PDF如何批量加注释_PDF多文件批注高亮操作教程  苹果17 Pro如何启用分屏浏览_iPhone 17 Pro分屏浏览设置步骤  更换小红书群背景怎么换?小红书群规则怎么设置?  《大学搜题酱》官网地址登录  在Dash应用中自定义HTML标题和网站图标  飞飞漫画漫画阅读官网_飞飞漫画漫画阅读官网进入阅读  虫虫助手如何更新游戏  创客贴登录页面入口 创客贴网页版最新网址链接  苹果手机聊天记录删除了如何恢复  Lar*el 中高效执行多列更新:单次查询实现  Win10如何关闭开机锁屏界面_Windows10跳过锁屏直接登录设置 

 2019-11-30

了解您产品搜索量及市场趋势,制定营销计划

同行竞争及网站分析保障您的广告效果

点击免费数据支持

提交您的需求,1小时内享受我们的专业解答。

运城市盐湖区信雨科技有限公司


运城市盐湖区信雨科技有限公司

运城市盐湖区信雨科技有限公司是一家深耕海外推广领域十年的专业服务商,作为谷歌推广与Facebook广告全球合作伙伴,聚焦外贸企业出海痛点,以数字化营销为核心,提供一站式海外营销解决方案。公司凭借十年行业沉淀与平台官方资源加持,打破传统外贸获客壁垒,助力企业高效开拓全球市场,成为中小企业出海的可靠合作伙伴。

 8156699

 13765294890

 8156699@qq.com

Notice

We and selected third parties use cookies or similar technologies for technical purposes and, with your consent, for other purposes as specified in the cookie policy.
You can consent to the use of such technologies by closing this notice, by interacting with any link or button outside of this notice or by continuing to browse otherwise.