Redis过期key的删除策略
在 Redis 中,设置了过期时间的键在过期时间到达后,并不会立即从内存中删除。如果不是,那过期后到底什么时候被删除呢?
下面对这三种删除策略进行具体分析。
立即删除:
立即删除能够保证内存数据的及时性和空间的有效利用,但在处理大量过期键时,它可能会对系统性能产生负面影响。
优点
- 立即删除确保过期键在其过期后立即从内存中删除,这样可以确保数据的最大新鲜度,避免了过期数据继续占用内存。
- 内存释放也是立即删除的一个重要优点,因为删除过期键会立即释放其占用的内存空间,使得系统能够更有效地管理内存。
缺点
- 立即删除操作会占用 CPU 时间,特别是在处理大量键时或者在 CPU 负载高的情况下。这可能会对同时进行的其他计算任务(如交集计算或排序)造成额外的压力。这种情况下,Redis 可能会在处理删除操作时对其他请求的响应速度产生一定的影响,尤其是在高并发情况下。
- Redis 使用无序链表来管理设置了过期时间的键。这意味着在执行过期键的检查和删除时,时间复杂度为 O(n),其中 n 是设置了过期时间的键的数量。尽管时间复杂度为 O(n),但通常情况下,链表中的过期键数量不会非常大,因此 Redis 的性能通常仍然能够满足大多数实际需求。
综上所述,虽然立即删除能够提供数据的最大新鲜度和内存的即时释放,但在处理大量过期键时可能会对 CPU 产生较大的负载。
惰性删除:
惰性删除是指,当一个键过期后,如果客户端尝试访问这个键,Redis 会先检查键是否过期。如果过期了,Redis 不会立即删除它,而是返回一个空值(nil)或者特定的过期标记,表示键已经过期。当有客户端访问这个键时,Redis 才会删除它并释放内存空间。
所以惰性删除的缺点很明显:浪费内存。dict字典和expires字典都要保存这个键值的信息。特别是在处理像日志这样的按时间更新的数据时,它可能会导致内存浪费问题。
定时删除(volatile-ttl):
定时删除是指,Redis 会以一定的频率(默认每秒钟检查10次)执行定期删除操作。在定期删除过程中,Redis 会扫描数据库中的部分过期键,并删除其中的过期键。这样做可以及时释放内存空间,避免过多过期键导致的内存浪费。
定时删除是一个常见的折中方案,能够有效地平衡立即删除和惰性删除所带来的问题。
这种方法通过周期性地执行删除操作来管理过期数据,具有以下几个关键优势:
- 控制CPU消耗:定时删除可以通过限制每次删除操作执行的时长和频率,从而减少对CPU的瞬时负载影响。相比于立即删除,它在执行删除操作时分摊了处理压力,更加稳定和可控。
- 减少内存浪费:相对于惰性删除,定时删除能够更及时地清理过期数据,从而有效减少长时间未使用的数据占用的内存空间。尤其对于存储大量日志或临时数据的场景,这种方式能显著降低内存浪费。
- 可调节性:定时删除的执行频率和处理时长可以根据具体应用的需求进行调整。可以根据数据更新频率、过期数据的访问模式以及系统的整体负载情况来动态调整定时删除的策略,以达到最佳的性能和资源利用率。
- 实现方式:在Redis中,可以通过定时任务(如使用Cron表达式)或者定时执行的后台任务来实现定时删除。也可以结合Redis的过期事件通知功能,使得过期数据的清理更加高效和即时。
总之,定时删除在实际应用中是一个非常有效的策略,特别适用于需要平衡CPU负载和内存利用的场景。通过合理配置删除频率和操作时长,可以最大程度地优化系统的整体性能和资源利用效率。
Redis使用的策略
Redis 使用的是一种结合了惰性删除和定期删除的过期键值删除策略,这种方式旨在平衡性能和资源利用的效率。
这两种删除策略的结合,使得Redis能够在保证内存空间高效利用的同时,避免了单次大规模删除操作可能带来的性能问题。惰性删除保证了操作的即时响应性,而定期删除则定期清理已过期的键,防止过期键占用过多内存。
总结
- 惰性删除:减少了性能开销,但可能导致内存浪费。
- 定期删除:定期清理过期键,平衡性能和内存利用。
- 立即删除:实时性高但性能开销大。
springboot+Redis的dome
1、引入依赖
首先,在 pom.xml 文件中添加 Spring Data Redis 的依赖:
<dependency><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter-data-redis</artifactId>
</dependency>
<dependency><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter-web</artifactId>
</dependency>
2、配置 Redis
在 application.yml文件中配置 Redis 连接:
spring:data:redis:host: localhostport: 6379database: 0password: # 密码(默认为空)
3、配置 RedisTemplate
创建一个配置类来配置 RedisTemplate:
package com.example.demo.config;import org.springframework.context.annotation.Bean;
import org.springframework.context.annotation.Configuration;
import org.springframework.data.redis.connection.RedisConnectionFactory;
import org.springframework.data.redis.core.RedisTemplate;
import org.springframework.data.redis.serializer.GenericJackson2JsonRedisSerializer;
import org.springframework.data.redis.serializer.StringRedisSerializer;@Configuration
public class RedisConfig {/*** 配置 RedisTemplate* 使用 StringRedisSerializer 序列化和反序列化 redis 的 key 值* 使用 GenericJackson2JsonRedisSerializer 序列化和反序列化 redis 的 value 值** @param redisConnectionFactory Redis 连接工厂* @return 配置好的 RedisTemplate*/@Beanpublic RedisTemplate<String, Object> redisTemplate(RedisConnectionFactory redisConnectionFactory) {RedisTemplate<String, Object> template = new RedisTemplate<>();template.setConnectionFactory(redisConnectionFactory);// 设置 key 和 Hash 的 key 序列化器为 StringRedisSerializertemplate.setKeySerializer(new StringRedisSerializer());template.setHashKeySerializer(new StringRedisSerializer());// 设置 value 和 Hash 的 value 序列化器为 GenericJackson2JsonRedisSerializertemplate.setValueSerializer(new GenericJackson2JsonRedisSerializer());template.setHashValueSerializer(new GenericJackson2JsonRedisSerializer());// 初始化 RedisTemplatetemplate.afterPropertiesSet();return template;}
}
4、使用 Redis 设置键的过期时间
创建一个简单的服务类来处理 Redis 操作:
package com.example.demo.service;import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.data.redis.core.RedisTemplate;
import org.springframework.stereotype.Service;import java.util.concurrent.TimeUnit;/*** Redis服务类,用于处理Redis相关的操作*/
@Service
public class RedisService {/*** RedisTemplate用于操作Redis,支持各种数据类型的存储和读取*/@Autowiredprivate RedisTemplate<String, Object> redisTemplate;/*** 设置键值对,并指定过期时间** @param key 键* @param value 值* @param timeout 过期时间* @param unit 过期时间单位*/public void setValueWithExpiration(String key, Object value, long timeout, TimeUnit unit) {redisTemplate.opsForValue().set(key, value, timeout, unit);}/*** 根据键获取值** @param key 键* @return 对应的值,如果不存在返回null*/public Object getValue(String key) {return redisTemplate.opsForValue().get(key);}/*** 删除指定键** @param key 要删除的键*/public void deleteValue(String key) {redisTemplate.delete(key);}
}
5、创建控制器来测试
创建一个简单的控制器来测试 Redis 过期键:
package com.example.demo.controller;import com.example.demo.service.RedisService;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.http.ResponseEntity;
import org.springframework.web.bind.annotation.GetMapping;
import org.springframework.web.bind.annotation.RequestMapping;
import org.springframework.web.bind.annotation.RequestParam;
import org.springframework.web.bind.annotation.RestController;import java.util.concurrent.TimeUnit;/*** Redis控制器,用于处理Redis相关的HTTP请求*/
@RestController
@RequestMapping("/redis")
public class RedisController {/*** 注入Redis服务,用于执行Redis操作*/@Autowiredprivate RedisService redisService;/*** 设置Redis键值对并指定过期时间** @param key 要设置的键* @param value 键的值* @param timeout 过期时间(秒),键将在指定秒数后自动删除* @return 响应实体,包含设置结果的信息*/@GetMapping("/set")public ResponseEntity<String> setKey(@RequestParam String key, @RequestParam String value, @RequestParam long timeout) {redisService.setValueWithExpiration(key, value, timeout, TimeUnit.SECONDS);return ResponseEntity.ok("键已设置,并将于 " + timeout + " 秒后过期");}/*** 获取Redis中的键值** @param key 要获取的键* @return 响应实体,包含键的值或相应提示信息*/@GetMapping("/get")public ResponseEntity<Object> getKey(@RequestParam String key) {Object value = redisService.getValue(key);if (value == null) {return ResponseEntity.ok("键不存在或已过期");}return ResponseEntity.ok(value);}/*** 删除Redis中的键** @param key 要删除的键* @return 响应实体,包含删除结果的信息*/@GetMapping("/delete")public ResponseEntity<String> deleteKey(@RequestParam String key) {redisService.deleteValue(key);return ResponseEntity.ok("键已删除");}
}
6、测试应用程序
启动 Spring Boot 应用程序,并通过以下 URL 测试 Redis 过期键:
设置键并指定过期时间(例如 10 秒):http://localhost:8080/redis/set?key=testKey&value=testValue&timeout=10
- 响应: "键已设置,并将于 10 秒后过期"
获取键的值:http://localhost:8080/redis/get?key=testKey
- 如果键存在: 返回键的值
- 如果键不存在或已过期: "键不存在或已过期"
删除键:http://localhost:8080/redis/delete?key=testKey
- 响应: "键已删除"
相关文章:
Redis过期key的删除策略
在 Redis 中,设置了过期时间的键在过期时间到达后,并不会立即从内存中删除。如果不是,那过期后到底什么时候被删除呢? 下面对这三种删除策略进行具体分析。 立即删除: 立即删除能够保证内存数据的及时性和空间的有效…...
软件管理
设备挂载在目录下才可以读 挂载类似于将u盘插在电脑上 mount /dev/sr0 /opt/openeuler/ vim /etc/rc.d/rc.local #开机自运行脚本,将挂载命令写入脚本,并给这个脚本执行权限 chmod x /etc/rc.d/rc.local [rootlocalhost ~]# cd /etc/yum.repos.d/ […...
【2024】Datawhale AI夏令营 Task3笔记——Baseline2部分代码解读及初步上分思路
【2024】Datawhale AI夏令营 Task3笔记——Baseline2部分代码解读及初步上分思路 本文对可完成赛事“逻辑推理赛道:复杂推理能力评估”初赛的Baseline2部分关键代码进行详细解读,介绍Baseline2涉及的关键技术和初步上分思路。 Baseline2代码由Datawhal…...
软件测试——测试分类(超超超齐全版)
为什么要对软件测试进行分类 软件测试是软件⽣命周期中的⼀个重要环节,具有较⾼的复杂性,对于软件测试,可以从不同的⻆度加以分类,使开发者在软件开发过程中的不同层次、不同阶段对测试⼯作进⾏更好的执⾏和管理测试的分类⽅法。…...
深入解析 Go 语言 GMP 模型:并发编程的核心机制
前些天发现了一个巨牛的人工智能学习网站,通俗易懂,风趣幽默,忍不住分享一下给大家:点击跳转到网站,对人工智能感兴趣的小伙伴可以点进去看看。 前言 本章是Go并发编程的起始篇章,在未来几篇文章中我们会…...
PHP中如何处理字符串
在PHP中,处理字符串是一项非常常见的任务,PHP提供了大量的内置函数来方便地处理字符串。以下是一些常用的字符串处理函数: strlen() - 返回字符串的长度。 php复制代码 $text "Hello, World!"; echo strlen($text); // 输出&…...
windows内存泄漏检查汇总
VLD(Visual Leak Detector) 下载 官方下载地址2.5 另一分支2.7 安装 点击运行安装...
yolo格式数据集之空中及地面拍摄道路病害检测7种数据集已划分好|可以直接使用|yolov5|v6|v7|v8|v9|v10通用
yolo格式数据集之空中及地面拍摄道路病害检测7种数据集已划分好|可以直接使用|yolov5|v6|v7|v8|v9|v10通用 本数据为空中及地面拍摄道路病害检测检测数据集,数据集数量如下: 总共有:33585张 训练集:6798张 验证集:3284张 测试集&a…...
[Meachines] [Easy] Mirai Raspberry树莓派默认用户登录+USB挂载文件读取
信息收集 IP AddressOpening Ports10.10.10.48TCP:22,53,80,1276,32400,32469 $ nmap -p- 10.10.10.48 --min-rate 1000 -sC -sV PORT STATE SERVICE VERSION 22/tcp open ssh OpenSSH 6.7p1 Debian 5deb8u3 (protocol 2.0) | ssh-hostkey: | 1024 aa:ef:5c:…...
从零开始安装Jupyter Notebook和Jupyter Lab图文教程
前言 随着人工智能热浪(机器学习、深度学习、卷积神经网络、强化学习、AGC以及大语言模型LLM, 真的是一浪又一浪)的兴起,小伙伴们Python学习的热情达到了空前的高度。当我20年前接触Python的时候,做梦也没有想到Python会发展得怎么…...
数据库魔法:SQL Server中自定义分区函数的奥秘
数据库魔法:SQL Server中自定义分区函数的奥秘 在SQL Server中,分区表是管理大型表和提高查询性能的强大工具。分区函数和分区方案允许你根据特定的规则将数据分散到不同的文件组中。本文将深入探讨如何在SQL Server中实现数据库的自定义分区函数&#…...
网页禁止移除水印
一般的话水印分为明水印和暗水印两种 明水印的话就是在视频canvas上面蒙上一个div(如我上篇文章) ,暗水印的话就是把文字通过技术嵌入到图像里。 具体实现的话可以使用MutationObserver API 来监视 DOM 的变化,特别是针对目标节…...
Node Red 与axios简易测试环境的搭建
为了学习在vue3中如何使用axios,我借Sider Fusion的帮助搭建了基于node的简易测试环境。 Axios 是一个基于 Promise 的 HTTP 客户端,通常用于浏览器环境,但它也可以在 Node.js 环境中使用。因此,可以在 Ubuntu 的 Bash 环境下通过…...
测试面试宝典(四十三)—— 接口测试流程
回答一: 接口测试一般遵循以下流程: 需求分析 仔细研究接口的需求文档,包括接口的功能、输入输出参数、业务逻辑、性能要求等。与开发人员、产品经理等沟通,确保对需求的理解准确无误。 测试计划制定 确定测试的目标、范围和策略。…...
arkhamintelligence 请求头加密 X-Payload 完整逆向分析+自动化解决方案
大家好!我是爱摸鱼的小鸿,关注我,收看每期的编程干货。 逆向是爬虫工程师进阶必备技能,当我们遇到一个问题时可能会有多种解决途径,而如何做出最高效的抉择又需要经验的积累。本期文章将以实战的方式,带你详细地逆向分析 arkhamintelligence 请求头加密字段 X-Payload 的…...
Vue Router哈希模式和历史模式
Vue官方文档 哈希模式(hash mode) 特点 URL 格式:使用 # 符号分隔路径,哈希值之后的部分由客户端解析。 https://example.com/#/about无需服务器配置:哈希值部分不会被发送到服务器,因此不需要额外的服…...
Springboot实战:AI大模型+亮数据代理助力短视频时代
目录 前言1.如何入门亮数据1.1、注册登录1.2、注册账号1.3、登录1.4、购买静态住宅代理1.5、展示购买的代理 2. 使用Springboot、AI大模型构建系统2.1 使用Springboot、AI大模型构建爬虫2.2、在Springboot项目添加工具 3、编写代码,爬取视频素材3.1、代码里使用代理…...
Postman请求问题 connect ECONNREFUSED 127.0.0.1:80解决方法
问题描述: 解决方法: (1)点击file-settings (2)点击Proxy,并将右边的Use the system proxy 取消选中 (3)勾选use custom proxy configuration 这个8080是默认的…...
维护SQL Server数据库索引:保持性能的黄金法则
维护SQL Server数据库索引:保持性能的黄金法则 在SQL Server中,数据库索引是优化查询性能的关键工具。然而,随着数据的不断变化,索引可能会变得碎片化或过时,从而降低数据库性能。因此,定期维护索引是确保…...
nvm管理node版本问题处理集合
windows上通过nvm管理node版本,通过nvm安装node,报错了,信息: > Could not retrieve https://nodejs.org/dist/latest/SHASUMS256.txt. Get > https://nodejs.org/dist/latest/SHASUMS256.txt: dial tcp 104.20.23.46:443: …...
未来机器人的大脑:如何用神经网络模拟器实现更智能的决策?
编辑:陈萍萍的公主一点人工一点智能 未来机器人的大脑:如何用神经网络模拟器实现更智能的决策?RWM通过双自回归机制有效解决了复合误差、部分可观测性和随机动力学等关键挑战,在不依赖领域特定归纳偏见的条件下实现了卓越的预测准…...
19c补丁后oracle属主变化,导致不能识别磁盘组
补丁后服务器重启,数据库再次无法启动 ORA01017: invalid username/password; logon denied Oracle 19c 在打上 19.23 或以上补丁版本后,存在与用户组权限相关的问题。具体表现为,Oracle 实例的运行用户(oracle)和集…...
【OSG学习笔记】Day 18: 碰撞检测与物理交互
物理引擎(Physics Engine) 物理引擎 是一种通过计算机模拟物理规律(如力学、碰撞、重力、流体动力学等)的软件工具或库。 它的核心目标是在虚拟环境中逼真地模拟物体的运动和交互,广泛应用于 游戏开发、动画制作、虚…...
java调用dll出现unsatisfiedLinkError以及JNA和JNI的区别
UnsatisfiedLinkError 在对接硬件设备中,我们会遇到使用 java 调用 dll文件 的情况,此时大概率出现UnsatisfiedLinkError链接错误,原因可能有如下几种 类名错误包名错误方法名参数错误使用 JNI 协议调用,结果 dll 未实现 JNI 协…...
大数据零基础学习day1之环境准备和大数据初步理解
学习大数据会使用到多台Linux服务器。 一、环境准备 1、VMware 基于VMware构建Linux虚拟机 是大数据从业者或者IT从业者的必备技能之一也是成本低廉的方案 所以VMware虚拟机方案是必须要学习的。 (1)设置网关 打开VMware虚拟机,点击编辑…...
使用van-uploader 的UI组件,结合vue2如何实现图片上传组件的封装
以下是基于 vant-ui(适配 Vue2 版本 )实现截图中照片上传预览、删除功能,并封装成可复用组件的完整代码,包含样式和逻辑实现,可直接在 Vue2 项目中使用: 1. 封装的图片上传组件 ImageUploader.vue <te…...
VTK如何让部分单位不可见
最近遇到一个需求,需要让一个vtkDataSet中的部分单元不可见,查阅了一些资料大概有以下几种方式 1.通过颜色映射表来进行,是最正规的做法 vtkNew<vtkLookupTable> lut; //值为0不显示,主要是最后一个参数,透明度…...
QT: `long long` 类型转换为 `QString` 2025.6.5
在 Qt 中,将 long long 类型转换为 QString 可以通过以下两种常用方法实现: 方法 1:使用 QString::number() 直接调用 QString 的静态方法 number(),将数值转换为字符串: long long value 1234567890123456789LL; …...
RNN避坑指南:从数学推导到LSTM/GRU工业级部署实战流程
本文较长,建议点赞收藏,以免遗失。更多AI大模型应用开发学习视频及资料,尽在聚客AI学院。 本文全面剖析RNN核心原理,深入讲解梯度消失/爆炸问题,并通过LSTM/GRU结构实现解决方案,提供时间序列预测和文本生成…...
【数据分析】R版IntelliGenes用于生物标志物发现的可解释机器学习
禁止商业或二改转载,仅供自学使用,侵权必究,如需截取部分内容请后台联系作者! 文章目录 介绍流程步骤1. 输入数据2. 特征选择3. 模型训练4. I-Genes 评分计算5. 输出结果 IntelliGenesR 安装包1. 特征选择2. 模型训练和评估3. I-Genes 评分计…...
