当前位置： 首页 > news >正文

redis AOF机制

news 文章来源：https://blog.csdn.net/qq_40244755/article/details/141353358 2025/2/9 2:07:11

在这里插入图片描述
在redis运行期间，不断将redis执行的写命令写到文件中，redis重启之后，只要将这些命令重复执行一遍就可以恢复数据。因为AOF只是将少量的写命令写入AOF文件中，因此其执行效率高于RDB，开启AOF即使Redis发生故障，丢失的数据也较少。

appendonly yes
appendfilename appendonly.aof

aof重写：随着命令不断添加aof文件会越来越大，redis会进行aof的重写，每个健只会写入最后一次命令，已删除或过期的数据相关命令将抹去。

  1. AOF定时逻辑
    1. 判断是否存在AOF重写操作，若当前没有子进程则执行AOF重写操作
    2. AOF重写条件
      1. AOF文件大于server.aof_rewrite_min_size
      2. 上次AOF重写后的文件大小，当前AOF文件增加的空间大小比例已经超过了server.aof_rewrite_perc配置，此配置默认为100.例如上次重写aof大小为80MB，现在aof文件有160了，则满足重写要求。
    3. 存在延迟的AOF缓冲区刷新操作，则将数据从缓冲区刷到文件中。
    4. 每经过一段时间，执行：若上次AOF缓冲区刷新操作中写入磁盘出错，则再次刷新缓冲区
  2. AOF持久化过程
    1. 命令传播
      1. 对带EXPIRE、EXPIREAT、PEXPIRE、SETEX、PSETEX,或者带EX、PX选项的SET命令做特殊处理。因为这些命令带有过期时间，需要将这些命令转换为PEXPIREAT命令，将过期时间的时间戳写入buf暂存区。
      2. 对于其他命令将命令写入buf暂存区
      3. 若服务器开启AOF功能，则将buf暂存区内容写入AOF缓冲区
      4. 如果当前线程正在执行AOF重写操作，则还需将buf暂存区内容写入到AOF重写缓冲区
    2. 刷新AOF缓冲区
      1. 当AOF缓冲区为空时，如果刷盘策略为每秒同步，且当前存在待同步的数据，距上次同步已经过去一秒，则开始同步。否则退出。
      2. 检查后台线程是否正在执行同步操作，若存在则执行以下逻辑：若同步策略为每秒同步，则延迟AOF缓冲区刷新操作。如果已经延迟多次且延迟时间超过2秒，则强制刷新AOF缓冲区。
      3. 将AOF缓冲区内容写入文件
      4. aof缓冲区内容刷新成功后，若aof总空间小于4kb，则清空并重用aof缓冲区，否则新建一个新的缓冲区。
    3. 同步磁盘
      1. 刷盘策略：
        1. 不执行fsync，速度快的安全性低
        2. 执行fsync，安全性高速度慢
        3. 每个一秒执行fsync，折中处理
      2. 如果程序存在子进程，且开了server.aof_no_fsync_on_rewrite配置，就不同步磁盘
      3. 若刷盘策略是每次同步(2)，则开始同步磁盘
      4. 若刷盘策略为每秒同步，且距上次同步已经过去一秒，则添加一个后台任务同步磁盘
  3. AOF重写
    1. aof混合持久化
      1. 若开启混合持久化，在AOF重写时，会将redis数据以RDB格式保存到新文件中，再将重写缓冲区增量写命令以aof格式写入文件。
    2. 重写过程：
      1. fork一个子进程(aof进程)，负责将当前内存数据保存到一个新文件中
        1. 打开一个临时文件并初始化rio变量
        2. 若开启了aof持久化，则生成rdb文件到临时文件中，否则将redis数据转化为写入命令写入临时文件
        3. 重复从server.aof_pipe_read_data_from_parent读取增量命令：
          1. 读取时间超过一秒或者连续20毫秒没有读取到则停止
          2. 若没有读取到增量命令则阻塞一秒等待增量命令
        4. 通知主进程(父进程)停止发送增量命令
        5. 再一次从server.aof_pipe_read_data_from_parent读取增量命令
        6. 将暂存区内容写入文件并同步磁盘
        7. 重命名文件
      2. 将步骤一执行期间的增量命令写入新文件中
      3. 主进程收尾，将步骤二执行期间主进程执行的赠礼命令写入新文件中，替换新的AOF文件
        1. 打开aof进程创建的文件
        2. 将重写缓冲区内容写入临时文件
        3. 重命名文件进行替换
        4. 磁盘同步并清空server.aof_buf内容
  4. AOF文件加载：
    1. 打卡aof文件
    2. 创建一个伪客户端，执行aof文件中的命令
    3. 如果文件以redis标志开头，则该aof文件是混合持久化方式生成，需调用处理RDB内容的函数加载RDB内容
    4. 处理aof文件中的命令
    5. 按照RESP协议格式，读取命令参数数量
    6. 读取每一个参数
    7. 查找命令redisCommand
    8. 调用redisCommand.proc执行命令

相关文章：

redis AOF机制

在redis运行期间，不断将redis执行的写命令写到文件中，redis重启之后，只要将这些命令重复执行一遍就可以恢复数据。因为AOF只是将少量的写命令写入AOF文件中，因此其执行效率高于RDB，开启AOF即使Redis发生故障&#xff0…...

编程日记 2024/8/22 0:23:03

Day 21代码|随想录| 二叉树完结撒花，今日刷题669.修剪二叉搜索树、108.将有序数组转换为二叉搜索树、538.吧二叉搜索树转换为累加树

提示：DDU，供自己复习使用。欢迎大家前来讨论~ 文章目录 二叉树 Part06二、题目题目一：669.修剪二叉搜索树解题思路：递归法迭代法： 题目二： 108.将有序数组转换为二叉搜索树解题思路递归法：迭代…...

编程日记 2024/8/22 0:20:00

cmake教程一

1. Start 1.1 构建简单工程 cmake_minimum_required(VERSION 3.0) project(Step1) add_executable(Step1 main.cpp)设置cmake最低版本要求设置工程名字设置工程生成可执行程序 2. 声明 C Standard set(CMAKE_CXX_STANDARD 11) set(CMAKE_CXX_STANDARD_REQUIRED True)如果我…...

编程日记 2024/8/22 0:17:57

3D场景标注标签信息，three.js CSS 2D渲染器CSS2DRenderer、CSS 3D渲染器CSS3DRenderer（结合react）

如果你想用HTML元素作为标签标注三维场景中模型信息，需要考虑定位的问题。比如一个模型，在代码中你可以知道它的局部坐标或世界坐标xyz，但是你并不知道渲染后在canvas画布上位置，距离web页面顶部top和左侧的像素px值。自己写代码把…...

编程日记 2024/8/22 0:16:56

C++参悟-单例模式

单例模式 一、概述1. 特点2. 实现方式3. 应用场景 二、实现代码1. 静态局部变量的懒汉单例2. 加锁的懒汉式单例3. 使用 C11 中的 std::call_one 的懒汉单例4. 饿汉式单例 一、概述 这里记录一下单例模式的最常用使用，单例模式（Single Pattern&#xff0…...

编程日记 2024/8/22 0:13:53

【题解】—— LeetCode一周小结32

🌟欢迎来到 我的博客 —— 探索技术的无限可能！ 🌟博客的简介（文章目录） 【题解】—— 每日一道题目栏 上接：【题解】—— LeetCode一周小结31 5.不含连续1的非负整数 题目链接：600. 不含连续…...

编程日记 2024/8/22 0:12:51

详解线索分层的目的、维度与创新实践

线索分层是一个系统性的过程，旨在更有效地管理、跟踪和利用线索资源。这一过程可以借鉴多种策略和方法，特别是在用户运营和市场营销中。 1、线索分层的目的 线索分层的主要目的是根据线索的不同特征或成熟度，将其分类管理，以便更…...

编程日记 2024/8/22 0:10:48

于8月21号的回顾

傍晚的日落和逐渐深邃的夜，驱散了白天的极致闷热。倦怠和疲惫充斥着大脑，喧嚣的浮沉又在耳边轰鸣。 我不曾想到，再次打开博客已经是两年后的今天了。手指轻轻滑过鼠标，博客的页面缓缓加载，那些被时间尘封的记忆瞬间涌…...

编程日记 2024/8/22 0:09:47

Abstract Class抽象类

抽象类（Abstract Class）在面向对象编程中是一种特殊的类，它不能被实例化，即不能创建该类的对象。抽象类主要用于定义一组接口（即方法），这些方法的具体实现由子类来完成。抽象类通常用于表示一种…...

编程日记 2024/8/22 0:06:45

webrtc ns 降噪之粉红噪声参数推导

webrtc中降噪中，前50帧需要进行简单噪声估计，使用白噪声和粉红噪声模型估算。 首先我们 复习 有色噪声（包含白噪声）的一般模型： S(f) 是频率 f 处的功率谱密度。f是频率。α 是一个频谱指数，通常在1左右。…...

编程日记 2024/8/22 0:05:44

IO进程线程8月21日

1&#xff0c;思维导图 2&#xff0c;登录 #ifndef __LOG_H__ #define __LOG_H__ #include<myhead.h> typedef struct {char name[20];char pwd[20]; }str;int regist();int login(); #endif#include"log.h" int login() {char a[20]"\n";str p,s;…...

编程日记 2024/8/22 0:04:43

Web安全：SqlMap工具

一、简介 sqlmap 是一款开源的渗透测试工具&#xff0c;可以自动化进行SQL注入的检测、利用&#xff0c;并能接管数据库服务器。它具有功能强大的检测引擎,为渗透测试人员提供了许多专业的功能并且可以进行组合&#xff0c;其中包括数据库指纹识别、数据读取和访问底层文件系统…...

编程日记 2024/8/22 0:03:42

用手机写一本电子书

第1步、进入Andi.cn网站 第2步、点击登录&#xff0c;注册用户 第3步、点击去创作&#xff0c;进入创作页面 第4步、点击右下角的小笔&#xff0c;写一篇文章 第5步、下翻&#xff0c;点击提交按钮 第6步、再写一篇文章 第7步、点击栏目设计 第8步、进入栏目设计&#xff0c;点…...

编程日记 2024/8/22 0:01:40

【网络编程】基于UDP的TFTP文件传输

1&#xff09;tftp协议概述 简单文件传输协议&#xff0c;适用于在网络上进行文件传输的一套标准协议&#xff0c;使用UDP传输 特点&#xff1a; 是应用层协议 基于UDP协议实现 数据传输模式 octet&#xff1a;二进制模式&#xff08;常用&#xff09; mail&#xff1a;已经不再…...

编程日记 2024/8/22 0:00:38

Vue 3 + Pinia 实现网页刷新功能

概述 在现代 Web 开发中&#xff0c;保持用户界面的动态性和响应性至关重要。当用户触发某些操作时&#xff0c;例如点击按钮或者完成表单提交&#xff0c;我们往往需要刷新页面的一部分来展示最新的数据。本文将介绍如何使用 Vue 3 和 Pinia 来实现这一功能。 技术栈 Vue 3…...

编程日记 2024/8/21 23:59:37

DVWA综合靶场漏洞讲解

目录 综合靶场漏洞讲解 Brute Force Low Medium High Command Injection Low Medium High File Inclusion Low,Medium,High File Upload Low Medium High SQL Injection Low Medium High SQL Injection (Blind) Low Medium High XSS&#xff08;DOM&am…...

编程日记 2024/8/21 23:57:35

实现Bezier样条曲线

1.给出n1 个控制点pk(xk,yk,zk),这里k可取值0-n,多项式函数公式如下 获取的单个点的代码 void zmBezier::getPoint(float u, double p[3]) {int n m_count - 1;double x 0, y 0, z 0;for(int k 0; k < n; k){x m_ctrlPoints[k][0] * BEZ_k_n(n, k, u);y m_ctrlPoin…...

编程日记 2024/8/21 23:55:32

MySQL中的EXPLAIN的详解

一、介绍 官网介绍&#xff1a; https://dev.mysql.com/doc/refman/5.7/en/explain-output.htmlhttps://dev.mysql.com/doc/refman/8.0/en/explain-output.htmlexplain&#xff08;执行计划&#xff09;&#xff0c;使用explain关键字可以模拟优化器执行sql查询语句&#xff…...

编程日记 2024/8/21 23:54:31

LearnOpenGL——SSAO学习笔记

LearnOpenGL——SSAO学习笔记 SSAO一、基本概念二、样本缓冲三、法向半球四、随机核心转动五、SSAO着色器六、环境遮蔽模糊七、应用SSAO遮蔽因子 SSAO 一、基本概念 环境光照是我们加入场景总体光照中的一个固定光照常量&#xff0c;它被用来模拟光的散射(Scattering)。散射应…...

编程日记 2024/8/21 23:51:27

[C语言]-基础知识点梳理-文件管理

前言 各位师傅们好&#xff0c;我是qmx_07&#xff0c;今天给大家讲解文件管理的相关知识&#xff0c;也就是常见的 读取&#xff0c;删除一类的操作 文件 为什么要使用文件&#xff1f; 程序的数据是存储在电脑的内存中&#xff0c;如果程序退出&#xff0c;内存回收&…...

编程日记 2024/8/21 23:50:26

pcdn闲置带宽被动收入必看教程。第五讲：光猫更换和基础设置

PCDN闲置带宽被动收入必看教程 —— 第五讲&#xff1a;光猫更换和基础设置 为了从闲置带宽中获得被动收入&#xff0c;高效的网络设备至关重要。运营商提供的光猫通常能满足日常家用需求&#xff0c;但对于PCDN应用来说&#xff0c;它们可能不足以提供所需的高性能和稳定性。…...

编程日记 2024/8/21 23:49:24

工业数据采集网关简介-天拓四方

随着工业4.0和物联网&#xff08;IoT&#xff09;技术的深入发展&#xff0c;工业数据采集网关作为连接现场设备与上层管理系统的关键节点&#xff0c;其在智能工厂中的作用愈发凸显。本文将深入探讨工业数据采集网关的功能、特点、应用场景及其实操性&#xff0c;以期为读者提…...

编程日记 2024/8/21 23:47:15

Java 调整字符串,验证码生成

package text7;public class ZiFanz {public static void main(String[] args) {//1.定义两个字符串String strA "abcde";String strB "deabc";//2.abcde->bcdea->cdeab->deabc旋转字符串//旋转并比较boolean result cheak(strA, strB);System…...

编程日记 2024/8/21 23:46:14

【专题】全球商用服务机器人市场研究(2023)报告合集PDF分享（附原数据表）

原文链接&#xff1a;https://tecdat.cn/?p37366 近年来&#xff0c;随着人工智能、物联网和自动化技术的不断进步&#xff0c;商用服务机器人行业迅速崛起&#xff0c;展现出广阔的发展前景。从最初的实验室研发到如今的规模化应用&#xff0c;商用服务机器人已逐渐成为各行…...

编程日记 2024/8/21 23:42:10

SQL UA注入 （injection 第十八关）

简介 SQL注入&#xff08;SQL Injection&#xff09;是一种常见的网络攻击方式&#xff0c;通过向SQL查询中插入恶意的SQL代码&#xff0c;攻击者可以操控数据库&#xff0c;SQL注入是一种代码注入攻击&#xff0c;其中攻击者将恶意的SQL代码插入到应用程序的输入字段中&a…...

编程日记 2024/8/21 23:40:09

初阶数据结构之计数排序

非比较排序 计数排序 计数排序⼜称为鸽巢原理&#xff0c;是对哈希直接定址法的变形应⽤。 操作步骤&#xff1a; 1&#xff09;统计相同元素出现次数 2&#xff09;根据统计的结果将序列回收到原来的序列中 #include "CountSort.h" void Count(int* arr, int n)…...

编程日记 2024/8/21 23:39:07

【开端】记一次诡异的接口排查过程

一、绪论 最近碰到这么一个情况&#xff0c;接口请求超时。前提是两台服务器间的网络是畅通的&#xff0c;端口也是通&#xff0c;应用代码也是通。意思是在应用上&#xff0c;接口没有任何报错&#xff0c;能正常返回数据。客户端到服务端接口也能通&#xff0c;但是接收不到服…...

编程日记 2024/8/21 23:38:06

jenkins最佳实践（二）：Pipeline流水线部署springCloud微服务项目

各位小伙伴们大家好呀&#xff0c;我是小金&#xff0c;本篇文章我们将介绍如何使用Pipeline流水线部署我们自己的微服务项目&#xff0c;之前没怎么搞过部署相关的&#xff0c;以至于构建流水线的过程中中也遇到了很多自己以前没有考虑过的问题&#xff0c;特写此篇&#xff0…...

编程日记 2024/8/21 23:36:04

第2章 C语言基础知识

第2章 C语言基础知识 1.printf()函数 在控制台输出数据&#xff0c;需要使用输出函数&#xff0c;C语言常用的输出函数为printf()。 printf()函数为格式化输出函数&#xff0c;其功能是按照用户指定的格式将数据输出到屏幕上。 printf(“格式控制字符串”,[输出列表]); 格式控…...

编程日记 2024/8/21 23:32:59

鹭鹰优化算法SBOA优化RBF神经网络的扩散速度实现多数入多输出数据预测，可以更改数据集（MATLAB代码）

一、鹭鹰优化算法介绍 鹭鹰优化算法&#xff08;Secretary Bird Optimization Algorithm, SBOA&#xff09;是一种新型的元启发式算法&#xff0c;它于2024年4月由Youfa Fu等人提出&#xff0c;并发表在SCI人工智能二区顶刊《Artificial Intelligence Review》上。该算法的灵感…...

编程日记 2024/8/21 23:31:59

影视网站建设源码/百度售后电话人工服务

良好的书写规范有利于自己后期查看&#xff0c;也有助于其他ABAPer阅读&#xff0c;在部分代码检查工具是自动规范检查。 良好的书写规范包括&#xff1a;定义&#xff0c;SQL&#xff0c;逻辑处理&#xff0c;条件判断等等。 记录书写规范&#xff0c;随时对比&#xff0c;自…...

编程日记 2025/2/9 1:34:37

那个做网站好/搜索广告是什么

Arcgis中如何为Shapefile属性表添加字段属性描述了要素的相关特性&#xff0c;并存储于表中。在创建新的属性表或是向已有的属性表中增加字段的时候&#xff0c;必须指明数据类型和字段属性&#xff0c;比如精度(Precision)或长度(Length)。数据类型的选择和相关设置会影响存储…...

编程日记 2025/2/8 22:23:06

建筑模型网站/武汉seo网站优化排名

今天来跟大家分享一个通道指标&#xff0c;一个趋势型指标&#xff0c;供大家参考交易思路思维&#xff01;大家要明白一点就是指标一定是存在滞后性的&#xff0c;所以不要盲目的崇拜指标所谓的圣杯&#xff0c;交易市场根本就不存在圣杯&#xff01;1)顺势操盘&#xff0c;多…...

编程日记 2025/2/8 19:58:24

济南资金盘网站开发公司靠谱吗/厦门网站综合优化贵吗

在对数据进行序列化和反序列化是常见的数据操作&#xff0c;Python提供了两个模块方便开发者实现数据的序列化操作&#xff0c;即 json 模块和 pickle 模块。这两个模块主要区别如下&#xff1a; json 是一个文本序列化格式&#xff0c;而 pickle 是一个二进制序列化格式&…...

编程日记 2025/2/8 19:01:45

申请一个自己的网站/石家庄网站建设培训

题库来源&#xff1a;安全生产模拟考试一点通公众号小程序 安全生产模拟考试一点通&#xff1a;低压电工报名考试考前必练&#xff01;安全生产模拟考试一点通每个月更新低压电工模拟考试题库题目及答案&#xff01;多做几遍&#xff0c;其实通过低压电工作业考试题库很简单。…...

编程日记 2025/2/8 18:53:29

前端wordpress/谷歌seo快速排名软件首页

针对Cisco2600的配置&#xff0c;大致分以下6个部分&#xff1a;<?xml:namespace prefix o ns "urn:schemas-microsoft-com:office:office" />1.拨号设置2.接口配置3.NAT转换4.路由设置5.DNS代理6.DHCP &#xff08;选配&#xff09;以下配置经过实验验证。…...

编程日记 2025/2/8 16:51:50