【Redis】Redis的双写问题
在分布式系统中,双写问题通常是指数据在多个存储系统(例如数据库和缓存)中更新时出现的不一致性。这种问题在使用 Redis 作为缓存层时尤为常见。具体来说,当数据在数据库和 Redis 缓存中存在副本时,任何对数据的更新操作都需要在两个地方进行,即“双写”。这可能导致以下几种问题:
-
缓存数据和数据库数据不一致:
- 数据库更新成功,缓存更新失败。
- 缓存更新成功,数据库更新失败。
- 数据库和缓存的更新顺序不同步。
-
缓存击穿、穿透、雪崩:
- 缓存击穿:热点数据失效,大量请求同时访问数据库。
- 缓存穿透:查询不存在的数据,直接穿透到数据库。
- 缓存雪崩:大量缓存数据在同一时间失效,导致大量请求直接访问数据库。
解决双写问题的方法:
1. Cache Aside Pattern(旁路缓存模式)
这是最常用的缓存策略。流程如下:
- 读操作:
- 先从缓存中读取数据。
- 如果缓存中没有数据,从数据库中读取数据,然后将数据写入缓存。
- 写操作:
- 更新数据库。
- 使缓存中的数据失效或更新缓存。
示例代码:
public class CacheAsidePattern {private RedisCache redisCache;private Database database;public Data getData(String key) {// 从缓存中读取数据Data data = redisCache.get(key);if (data == null) {// 如果缓存中没有数据,从数据库中读取数据data = database.get(key);// 将数据写入缓存redisCache.put(key, data);}return data;}public void updateData(String key, Data newData) {// 更新数据库database.update(key, newData);// 使缓存中的数据失效或更新缓存redisCache.delete(key);}
}
优点:
- 实现简单,常见的使用模式。
- 读取效率高,避免了频繁访问数据库。
缺点:
- 在高并发场景下,可能会出现短暂的不一致性。
- 数据在缓存过期和数据库更新的窗口期可能会不一致。
解决方案:
- 增加数据版本号或时间戳,确保数据一致性。
- 使用合适的缓存失效策略,减少不一致窗口。
2. Write Through Cache(写通缓存)
原理:
- 读操作:与 Cache Aside Pattern 类似,从缓存中读取数据。
- 写操作:直接更新缓存,缓存负责同步更新数据库。
示例代码:
public class WriteThroughCache {private RedisCache redisCache;public void updateData(String key, Data newData) {// 更新缓存,并让缓存负责同步更新数据库redisCache.putAndUpdateDatabase(key, newData);}
}
优点:
- 确保缓存和数据库的一致性。
- 写操作成功后,即保证了数据库和缓存的数据一致。
缺点:
- 写操作的延迟较高,因为每次写操作都需要同步更新数据库。
- 复杂性较高,需要确保缓存的更新操作能正确同步到数据库。
解决方案:
- 通过批量更新和异步操作,减少单次写操作的延迟。
3. Write Behind Cache(写回缓存)
原理:
- 读操作:与前两种模式类似,从缓存中读取数据。
- 写操作:更新缓存,由缓存异步地更新数据库。
示例代码:
public class WriteBehindCache {private RedisCache redisCache;public void updateData(String key, Data newData) {// 更新缓存,并异步地更新数据库redisCache.putAndAsyncUpdateDatabase(key, newData);}
}
优点:
- 写操作的延迟较低,因为写操作主要集中在缓存中。
- 提高了写操作的吞吐量。
缺点:
- 可能会出现数据丢失的风险(例如缓存宕机时未及时更新数据库)。
- 数据最终一致性问题,需要额外处理。
解决方案:
- 使用可靠的消息队列系统来确保数据更新消息的送达和处理。
- 定期同步缓存和数据库的数据,确保最终一致性。
4. 使用消息队列进行异步更新
原理:
- 读操作:与其他模式类似,从缓存中读取数据。
- 写操作:更新缓存,并通过消息队列异步地更新数据库。
示例代码:
public class CacheWithMessageQueue {private RedisCache redisCache;private MessageQueue messageQueue;public void updateData(String key, Data newData) {// 更新缓存redisCache.put(key, newData);// 发送异步消息更新数据库messageQueue.sendUpdateMessage(key, newData);}
}
消息队列处理器:
public class DatabaseUpdater {private Database database;public void onMessage(UpdateMessage message) {String key = message.getKey();Data newData = message.getData();// 更新数据库database.update(key, newData);}
}
优点:
- 提高了系统的可扩展性和性能。
- 异步更新,降低写操作的延迟。
缺点:
- 需要处理消息队列的可靠性和数据一致性问题。
- 增加了系统的复杂性,需要处理消息的幂等性和重复消费问题。
解决方案:
- 确保消息队列具有高可靠性和高可用性。
- 使用幂等性设计,确保消息重复消费时不会导致数据不一致。
选择适当的策略
选择合适的策略取决于系统的具体需求和场景:
- 一致性优先:选择
Cache Aside Pattern
或Write Through Cache
。适用于对数据一致性要求较高的场景。 - 性能优先:选择
Write Behind Cache
或使用消息队列进行异步更新。适用于对写操作性能要求较高的场景。 - 混合策略:在实际应用中,可以结合使用不同的策略。例如,某些关键数据使用同步更新,非关键数据使用异步更新。
实际应用示例
假设我们有一个电商系统,需要处理商品库存的更新和查询。我们可以采用以下混合策略:
-
查询库存:
- 先从缓存中读取,如果缓存中没有数据,从数据库中读取并写入缓存。
-
更新库存:
- 更新数据库后,立即更新缓存(同步更新)。
- 同时发送异步消息,通过消息队列异步地更新缓存,以应对高并发下的延迟问题。
示例代码:
public class InventoryService {private RedisCache redisCache;private Database database;private MessageQueue messageQueue;public int getInventory(String productId) {// 从缓存中读取数据Integer inventory = redisCache.get(productId);if (inventory == null) {// 如果缓存中没有数据,从数据库中读取数据inventory = database.getInventory(productId);// 将数据写入缓存redisCache.put(productId, inventory);}return inventory;}public void updateInventory(String productId, int newInventory) {// 更新数据库database.updateInventory(productId, newInventory);// 更新缓存redisCache.put(productId, newInventory);// 发送异步消息更新缓存messageQueue.sendUpdateMessage(productId, newInventory);}
}
消息队列处理器:
public class InventoryUpdateProcessor {private RedisCache redisCache;public void onMessage(UpdateMessage message) {String productId = message.getKey();int newInventory = message.getData();// 更新缓存redisCache.put(productId, newInventory);}
}
通过这种混合策略,可以在保证数据一致性的同时,尽量提高系统的性能和可扩展性。根据具体的业务需求和场景,选择合适的缓存和数据库更新策略,是构建高性能、高可用分布式系统的重要一环。
相关文章:
【Redis】Redis的双写问题
在分布式系统中,双写问题通常是指数据在多个存储系统(例如数据库和缓存)中更新时出现的不一致性。这种问题在使用 Redis 作为缓存层时尤为常见。具体来说,当数据在数据库和 Redis 缓存中存在副本时,任何对数据的更新操…...
生气时,你的“心”会发生什么变化?孟德尔随机化分析猛如虎,结果都是套路...
“不生气不生气,气出病来无人替”,不少人遇事常这样宽慰自己。事实上,“气死”真不是危言耸听。越来越多的研究证明了情绪稳定对健康的重要性,那么,当情绪频繁波动时,我们的心血管究竟会发生什么变化&#…...
页面加载性能分析时,有哪些常见的性能瓶颈需要特别注意?
在进行页面加载性能分析时,以下是一些常见的性能瓶颈,需要特别注意: 长页面加载时间: 页面加载时间超过行业标准或用户期望,导致用户流失。 高 CPU 使用率: 某些脚本或操作导致 CPU 使用率飙升,…...
Scanner
Java 有一个 Scanner 类,用这个类可以接受键盘输入。 步骤: 导入该类所在的包(要使用一个类的话就必须先导入该类所在的包)创建该类的对象调用里面的功能 Scanner 有两套系统。 第一套系统: nextInt(); nextDoubl…...
vue3实现录音与录像上传功能
录音 <script setup lang"ts"> import { onMounted, reactive, ref } from vue; import useInject from /utils/useInject;const props: any defineProps<{params?: any; }>();const recObj: any reactive({blob: null, });const { $global, $fn } …...
PHP小方法
一、随机生成姓名 二、随机获取身份证 三、随机获取手机号 四、随机获取省 五、通过身份证获取生日和性别 六、通过身份证获取年龄 七、获取访问IP 八、获取访问URL地址 九、陆续增加 //一、随机生成姓名 function generateName(){$arrXing getXingList();$numbXing …...
gulimall-search P125 springboot整合elasticsearch版本冲突
一、问题 spring-boot.version 2.2.4.RELEASE,在gulimall-search pom.xml中添加elasticsearch.version 7.4.2后,发现出现如下问题:elasticsearch版本是springboot引入的6.8.6,没有变为7.4.2。 二、原因 在gulimall-search 的pom文件中&#…...
如何在Coze中实现Bot对工作流的精准调用(如何提高Coze工作流调用的准确性和成功率)
文章目录 📖 介绍 📖🏡 演示环境 🏡📒 工作流(workflow)📒📝 创建设计工作流📝 添加工作流📝 调用工作流⚓️ 相关链接 ⚓️📖 介绍 📖 在使用Coze平台创建智能Bot时,您可能会遇到一个常见问题:即便添加了正确的工作流,Bot却没有按照预期调用它们。…...
毫米波雷达阵列天线设计综合1(MATLAB仿真)
1 天线设计目标 毫米波雷达探测目标的距离、速度和角度,其中距离和角度和天线设计相关性较强。天线增益越高,则根据雷达方程可知探测距离越远;天线波束越窄,则角度分辨率越高;天线副瓣/旁瓣越低,则干扰越少…...
Freemarker
Freemarker简介 Freemarker是一个用Java语言编写的模板引擎,用于基于模板和数据生成文本输出。它可以用于生成HTML网页、XML文档、电子邮件、配置文件等任何格式的文本。Freemarker将业务逻辑与表示逻辑分离,使得开发人员可以专注于功能实现,…...
基于Zero-shot实现LLM信息抽取
基于Zero-shot方式实现LLM信息抽取 在当今这个信息爆炸的时代,从海量的文本数据中高效地抽取关键信息显得尤为重要。随着自然语言处理(NLP)技术的不断进步,信息抽取任务也迎来了新的突破。近年来,基于Zero-shot&#x…...
【python】tkinter GUI编程经典用法,Label标签组件应用实战详解
✨✨ 欢迎大家来到景天科技苑✨✨ 🎈🎈 养成好习惯,先赞后看哦~🎈🎈 🏆 作者简介:景天科技苑 🏆《头衔》:大厂架构师,华为云开发者社区专家博主,…...
国产操作系统上给麒麟虚拟机安装virtualbox增强工具 _ 统信 _ 麒麟 _ 中科方德
原文链接:国产操作系统上给麒麟虚拟机安装virtualbox增强工具 | 统信 | 麒麟 | 中科方德 Hello,大家好啊!昨天给大家带来了一篇在国产操作系统上给VirtualBox中的Win7虚拟机安装增强工具的文章,今天我们将继续深入,介绍…...
(delphi11最新学习资料) Object Pascal 学习笔记---第14章泛型第3节(特定类约束)
14.3.2 特定类约束 如果您的泛型类需要使用某个特定子集的类(特定层次结构),则可能需要根据给定基类指定约束。 例如,如果您声明: typeTCompClass<T: TComponent> class 则此泛型类的实例仅适用于组…...
【postgresql初级使用】视图上的触发器instead of,替代计划的rewrite,实现不一样的审计日志
instead of 触发器 专栏内容: postgresql使用入门基础手写数据库toadb并发编程 个人主页:我的主页 管理社区:开源数据库 座右铭:天行健,君子以自强不息;地势坤,君子以厚德载物. 文章目录 inst…...
window.setInterval(func,interval)定时器
window.setInterval()是JavaScript中的方法,用于在指定的时间间隔重复执行某个函数或代码块。它接受两个参数,第一个参数是要执行的函数或代码块,第二个参数是时间间隔(以毫秒为单位)。 以下是使用window.setInterval…...
Einstein Summation 爱因斯坦求和 torch.einsum
Einstein Summation 爱因斯坦求和 torch.einsum flyfish 理解爱因斯坦求和的基本概念和语法,这对初学者来说可能有一定难度。对于不熟悉该表示法的用户来说,可能不如直接的矩阵乘法表达式易于理解。 整个思路是 向量的点积 -》矩阵乘法-》einsum 向…...
TCP攻击是怎么实现的,如何防御?
TCP(Transmission Control Protocol)是互联网协议族中的重要组成部分,用于在不可靠的网络上提供可靠的数据传输服务。然而,TCP协议的一些特性也使其成为攻击者的目标,尤其是DDoS(Distributed Denial of Ser…...
Chrome DevTools开发者调试工具
Chrome DevTools 是一个功能强大的网页开发工具,集成在谷歌浏览器中,帮助开发者调试和优化网页应用。以下是详细的功能说明和使用技巧: 1. 打开 DevTools 快捷键:按下 F12 或 CtrlShiftI(Windows/Linux)或…...
产品创新管理:从模仿到引领,中国企业的创新之路
一、引言 在全球化竞争日益激烈的今天,科技创新已成为推动国家经济增长和社会进步的关键动力。中国自改革开放四十年来,在科技创新领域取得了举世瞩目的成就,从跟踪模仿到自主研发,再到自主创新、开放创新和协同创新并举…...
Android 日志实时输出
开发中如果只是单纯的应用开发,Android studio基本上可以满足,但是如果应用和系统联调那就得用logcat实时输出了,我这里都是总结的实用经验,没那么多花里胡哨 Android 日志实时输出 1、输出 android log //分步,进入s…...
JavaEE初阶---多线程编程(一.线程与进程)
目录 🤣一.线程与进程的概念与联系: 进程的基本概念: 线程的基本概念: 进程和线程的区别与联系: 🙃代码执行实列: 1.通过继承Thread父类来实现多线程 2.通过实现Runnable接口来实现多线程…...
react+vite创建
要在本地初始化一个结合了React和Vite的项目,你可以遵循以下步骤: 1、安装Node.js: 确保你的机器上已安装了Node.js。如果未安装,请前往Node.js官网下载并安装。 2、使用终端或命令提示符: 打开你的终端(…...
软考 系统架构设计师系列知识点之杂项集萃(29)
接前一篇文章:软考 系统架构设计师系列知识点之杂项集萃(28) 第46题 以下描述中,( )不是嵌入式操作系统的特点。 A. 面向应用,可以进行裁剪和移植 B. 用于特定领域,不需要支持多任…...
[Qt开发]当我们在开发兼容高分辨率和高缩放比、高DPI屏幕的软件时,我们在谈论什么。
前言 最近在开发有关高分辨率屏幕的软件,还是做了不少尝试的,当然我们也去网上查了不少资料,但是网上的资料也很零碎,说不明白,这样的话我就做个简单的总结,希望看到这的你可以一次解决你有关不同分辨率下…...
uniapp视频组件层级太高,解决方法使用subNvue原生子体窗口
目录 前言 先看一下uniapp官网的原话: subNvue的一些参数介绍 subNvues使用方法: 绑定id 显示 subNvue 弹出层 subNvue.show() 参数信息 subNvue.hide() 参数信息 在使用subNvue 原生子体窗口 遇到的一些问题 前言 nvue 兼容性 以及使用方式 控…...
java项目使用jsch下载ftp文件
pom <dependency><groupId>com.jcraft</groupId><artifactId>jsch</artifactId><version>0.1.55</version> </dependency>demo1:main方法直接下载 package com.example.controller;import com.jcraft.jsch.*; im…...
指针(初阶1)
一.指针是什么 通俗的讲,指针就是地址,其存在的意义就像宾馆房间的序号一样是为了更好的管理空间。 如下图: 如上图所示,指针就是指向内存中的一块空间,也就相当于地址 二.一个指针的大小是多少 之前我们学习过&#x…...
MySQL实体类框架
实现mysql数据库的增删改查功能 import com.mchange.v2.collection.MapEntry; import lombok.Data; import org.junit.jupiter.api.Test;import java.io.File; import java.io.FileOutputStream; import java.io.IOException; import java.lang.reflect.*; import java.sql.*; …...
数据结构之初始泛型
找往期文章包括但不限于本期文章中不懂的知识点: 个人主页:我要学编程(ಥ_ಥ)-CSDN博客 所属专栏:数据结构(Java版) 目录 深入了解包装类 包装类的由来 装箱与拆箱 面试题 泛型 泛型的语法与使用…...
最新国内新闻50条简短/长沙建站seo公司
作者:农民工老王 来源:blog.csdn.net/monarch91/article/details/122709576 我是一个非科班出身的程序员,大学本科时的专业和编程无关,毕业后做了几年事业单位后,才中途转行做了软件开发。 我一入行就听说了35岁危机&…...
西宁高端网站建设/网络测试
转自:http://www.cnblogs.com/lhb25/p/useful-jquery-tips-and-tricks.html 今天,我们将分享一些很有用的技巧和窍门给 jQuery 开发人员。jQuery 是最好的 JavaScript 库之一,用于简化动画,事件处理,支持 Ajax 和 HTML…...
教学资源库网站建设立项申报书/网站搭建平台都有哪些
原文:http://www.impressivewebs.com/7-javascript-differences-between-firefox-ie/#comment-624 作者注:本篇文章发表于2009.04.27,是一篇关于讨论Javascript在IE6、IE7和FF2、FF3.0之间的存在的问题的文章。 尽管需要用冗长的JavaScript代…...
WordPress潮流媒体主题/seo优化技术招聘
Signal 顾名思义是信号的意思,为什么要用到这个东西了? 原因:由于现在在负责写网游的后台loginServer,里面写了不少配置文件,当我们的产品上线后,loginServer开启后这时配置文件的数据就被读取进去了,但是…...
帝国cms做网站/百度seo标题优化软件
密码算法和协议:四大类 对称加密:用于加密任意大小的数据块数据内容,加密方和解密方使用的是同一个密码 公钥加密:(非对称加密)加密和解密使用的是不同的密码,有公钥和私钥,密…...
网站创意策划案/广告联盟平台
SQL Server AlwaysOn读写分离配置 pursuer.chen 备注: 作者:pursuer.chen 博客:http://www.cnblogs.com/chenmh 本站点所有随笔都是原创,欢迎大家转载;但转载时必须注明文章来源,且在文章开头明显处给明链…...