当前位置： 首页 > news >正文

混沌工程/混沌测试/云原生测试/云平台测试

news 文章来源：https://blog.csdn.net/qq_39214101/article/details/144137688 2025/1/12 22:59:53

背景

  • 私有云/公有云/混合云等具有复杂，分布式，环境多样性等特点，许多特殊场景引发的线上问题很难被有效发现。所以需要引入混沌工程，建立对系统抵御生产环境中失控条件的能力以及信心，提高系统面对未知风险得能力。

目标

  • 帮助测试/研发/运维工程师提前发现各种异常场景引发的问题；
  • 持续进行故障演练，暴露系统问题，提升产研对质量的信心；
  • 全场景，便捷的故障注入方式，使其与研发流程更紧密结合，发挥更大价值；

什么是混沌工程？

混沌工程是一种通过主动制造故障场景并根据系统在各种压力下的行为表现确定优化策略的系统稳定性保障手段。简单来说，混沌工程通过主动注入故障的方式，提前发现问题并解决问题，从而规避风险

混沌工程的核心概念

混沌工程的核心在于通过模拟生产环境中的各种极端情况，如硬件故障、网络延迟、资源耗尽等，来测试系统的稳定性和可靠性。通过这些实验，可以暴露系统中的薄弱环节，并采取措施进行优化。

原则

建立一个围绕稳定状态行为的假说

“稳定状态”是指系统正常运行时的状态。具体来说，系统的稳定状态可以通过一些指标来定义，当系统指标在测试完成后，无法快速恢复稳态要求，可以认为这个系统是不稳定的。

  • 系统指标：CPU 负载、内存使用情况、网络 I/O等
  • 业务指标：吞吐率，错误率，p99延迟，数据一致性，消息触达准确性，时效性等
    因此需要建立稳定状态行为模型

复杂多变的系统运行环境

只要运行时间足够长，都会受到不可预测的事件和条件的影响。
在这里插入图片描述

基于这些情况:

  • 需要建立业务系统的故障模型

故障分级

故障等级：P0，P1，P2
故障等级=故障发生概率*故障发生影响
在生产环境中运行实验
越接近生产环境，对实验结果的信心就越足。

持续自动化运行实验

系统不断变化，越来越复杂，手动执行，难以长久持续。需要通过自动化来降低实验成本，并定期执行。

  • 固化典型混沌场景
  • 自动化进行结果分析
  • 降低创建新实验的门槛

怎么做:

  • 混沌场景梳理
  • 自动化工具&平台调研

最小化爆炸半径

暴露薄弱环节而不会意外造成更大规模的故障。

  • 范围可控
  • 随时停止实验并消除影响

步骤

  1. 选择一个假设
  2. 选择试验的范围
  3. 明确需要观察的 metric 指标
  4. 通知相关的团队
  5. 执行试验
  6. 分析结果
  7. 增大试验的范围
  8. 自动化
  9. 成熟度

复杂度

暂时无法在飞书文档外展示此内容

接受度

在这里插入图片描述

分产品混沌场景

梳理产品维度混沌场景，多用于多业务线合作的方式，开放自己的组件或基础服务时，需要先保障自己服务依赖的其他服务/系统/服务器得一些异常尽可能对自身造成最低的影响，以及当依赖服务/资源恢复时，自身可以主动进行服务恢复/数据同步/数据校验等

自动化平台方案

chaosblade
自研命令行工具自动化

企业内部演进

在这里插入图片描述

常见混沌场景

混沌异常场景来源于两类，梳理了常见异常，只做举例，大家参考

  • 资源类
  • 组件&服务类

资源类

在这里插入图片描述
在这里插入图片描述

组件&服务类

在这里插入图片描述

相关文章：

混沌工程/混沌测试/云原生测试/云平台测试

背景 私有云/公有云/混合云等具有复杂，分布式，环境多样性等特点，许多特殊场景引发的线上问题很难被有效发现。所以需要引入混沌工程，建立对系统抵御生产环境中失控条件的能力以及信心，提高系统面对未知风险得能力。 …...

编程日记 2024/12/1 17:30:26

研发设计数字化：PLM、PDM、ERP介绍及其区别

一、产品全生命周期管理的定义 1.1 产品全生命周期（PLM）发展背景 目前，数字化设计与制造的技术（如CAX、DFX等）已经在产品开发中得到广泛应用，而各种企业和产品管理软件（如ERP、SCM、PDM、CRM等…...

编程日记 2024/12/1 17:29:23

Python练习51

Python日常练习 题目： 调用函数fun判断一个三位数是否“水仙花数”。 在main函数中从键盘输入一个三位数，并输 出判断结果。请编写fun函数。 说明： 所谓“水仙花数”是指一3位数，其各位数字立方和 等于该数本…...

编程日记 2024/12/1 17:28:21

Qt 前置课程 QtNFC

文章目录 详解 Qt NFC 模块（QtNFC）1. 什么是 NFC？2. NFC 的原理2.1 主动设备与被动设备2.2 三种工作模式2.3 数据交换 3. QtNFC 模块概述4. 使用 QtNFC 模块4.1 配置 .pro 文件 5. NFC 的常见应用场景6. QtNFC 模块的主要类6.1 QNearFieldMan…...

编程日记 2024/12/1 17:27:20

【论文阅读】 Learning to Upsample by Learning to Sample

论文结构目录 一、之前的上采样器二、DySample概述三、不同上采样器比较四、整体架构五、设计过程（1）初步设计（2）第一次修改（3）第二次修改（4）第三次修改 六、DySample四种变体七、复…...

编程日记 2024/12/1 17:26:19

堆排序（含证明）

引言 前面我们讲过堆的基本操作的实现，现在给定一个int类型的数组，里面存放的数据是无序的，我们如何利用堆的思想来实现数组内数据的升序排列或降序排列呢？ 通过前面讲到的堆的实现，我们可以想到，我们再开…...

编程日记 2024/12/1 17:25:18

蓝桥杯模拟题不知名题目

题目:p是一个质数&#xff0c;但p是n的约数。将p称为是n的质因数。求2024最大质因数。 #include<iostream> #include<algorithm> using namespace std; bool fun(int x) {for(int i 2 ; i * i < x ; i){if(x % i 0)return false;}return true; } int main() …...

编程日记 2024/12/1 17:24:08

C#中的工厂模式

在C#中&#xff0c;工厂模式&#xff08;Factory Pattern&#xff09; 是一种常见的设计模式&#xff0c;它属于创建型模式&#xff0c;主要用于定义一个用于创建对象的接口&#xff0c;让子类决定实例化哪一个类。通过使用工厂模式&#xff0c;客户端代码不需要直接实例化具体…...

编程日记 2024/12/1 17:23:04

深度学习与持续学习：人工智能的未来与研究方向

文章目录 1. 持续学习与深度学习1.1 深度学习的局限1.2 持续学习的定义 2. 目标与心智2.1 奖励假说2.2 心智的构成 3. 对研究方法的建议3.1 日常写作记录3.2 中立对待流行趋势 1. 持续学习与深度学习 1.1 深度学习的局限 深度学习注重“瞬时学习”&#xff0c;如ChatGPT虽在语…...

编程日记 2024/12/1 17:22:03

OGRE 3D----4. OGRE和QML共享opengl上下文

在现代图形应用开发中，OGRE（Object-Oriented Graphics Rendering Engine）和QML（Qt Modeling Language）都是非常流行的工具。OGRE提供了强大的3D渲染能力，而QML则用于构建灵活的用户界面。在某些应用场景中，我们需要在同一个应用程序中同时使用OGRE和QML，并且共享OpenGL…...

编程日记 2024/12/1 17:20:00

【Umi】常用配置

具体见&#xff1a;alias 1. 基础配置 1)配置别名alias 2)配置sourcemap devtool 配置项 3)添加hash 4)图片转base64 inlineLimit 配置项 5)设置JS压缩方式 jsMinifier (webpack) 、jsMinifierOptions 配置项 6)设置umi插件 plugins 配置项 7)设置打包后资源导入的路…...

编程日记 2024/12/1 17:17:58

Windows加固脚本

echo off REM 清屏 cls title 安全策略设置批处理 color f0 echo **************************************** echo write by afei echo https://www.jianshu.com/u/ea4c85fbe8c7 echo **************************************** pause cls color 3f echo ********************…...

编程日记 2024/12/1 17:15:56

玩游戏常常出现vc++runtime library error R6025 这是什么意思，该怎么解决?

当玩游戏时常常出现“vc runtime library error R6025”错误&#xff0c;这通常表明微软C开发运行库组件存在问题。以下是对该错误及其解决方法的详细解释&#xff1a; 错误含义 “vc runtime library error R6025”是一个与Visual C运行时库相关的错误&#xff0c;该错误表明…...

编程日记 2024/12/1 17:13:55

AGX orin下电控制

AGX orin下电主要有两种&#xff0c;一种通过软件控制下电&#xff0c;另一种通过按键强制关机。下电流程和电脑关机流程类似。 AGX orin核心板与扩展板 AGX orin核心板由英伟达生产&#xff0c;不提供原理图&#xff0c;通过下图所示连接器与扩展板连接。 AGX orin扩展板&am…...

编程日记 2024/12/1 17:12:54

flutter 报错 error: unable to find git in your path.

项目issue&#xff1a;WIndows: "Unable to find git in your PATH." if terminal is not in admin mode Issue #123995 flutter/flutter 解决办法&#xff0c; 方法一&#xff1a;每次想要运行flutter的时候以管理员方式运行&#xff0c;比如以管理方式运行vsco…...

编程日记 2024/12/1 17:10:52

芯科科技率先支持Matter 1.4，推动智能家居迈向新高度

Matter 1.4引入核心增强功能、支持新设备类型&#xff0c;持续推进智能家居互联互通 近日&#xff0c;连接标准联盟&#xff08;Connectivity Standard Alliance&#xff0c;CSA&#xff09;发布了Matter 1.4标准版本。作为连接标准联盟的重要成员之一&#xff0c;以及Matter标…...

编程日记 2024/12/1 17:06:49

C语言数据相关知识：静态数据、越界与溢出

1、静态数组 在 C 语言中&#xff0c;数组一旦被定义后&#xff0c;占用的内存空间就是固定的&#xff0c;容量就是不可改变的&#xff0c;既不能在任何位置插入元素&#xff0c;也不能在任何位置删除元素&#xff0c;只能读取和修改元素&#xff0c;我们将这样的数组称为静态…...

编程日记 2024/12/1 17:05:46

文本分析之余弦相似度

余弦相似度（Cosine Similarity）是一种用于衡量两个非零向量之间相似度的指标，尤其常用于文本分析和自然语言处理领域。其核心思想是通过计算两个向量的夹角余弦值来评估它们的相似性。具体而言，余弦相似度的值范围从-1到1，其中1表示两个向量完全相同，0表示它们之间没有相…...

编程日记 2024/12/1 17:04:45

【VUE3】【Naive UI】＜n-button＞ 标签

【VUE3】【Naive UI】&#xff1c;n-button&#xff1e; 标签 **type**- 定义按钮的类型&#xff0c;这会影响按钮的颜色和样式。**size**- 设置按钮的大小。**disabled**- 布尔值&#xff0c;控制按钮是否处于禁用状态。**loading**- 布尔值&#xff0c;表示按钮是否处于加载状…...

编程日记 2024/12/1 17:03:44

css使盒子在屏幕的地点固定

在 CSS 中&#xff0c;要将一个元素固定在页面的某个位置&#xff0c;可以使用 position: fixed 属性。以下是详细的代码示例和中文解释&#xff1a; <!DOCTYPE html> <html lang"zh-CN"> <head><meta charset"UTF-8"><meta n…...

编程日记 2024/12/1 17:02:42

Transformers快速入门代码解析（六）：注意力机制——Transformer Encoder：执行顺序解析

Transformer Encoder&#xff1a;执行顺序解析 引言执行顺序解析1. 设置模型检查点和分词器2. 输入预处理操作说明&#xff1a; 3. 加载模型配置configconfig 包含的主要参数常见配置&#xff08;BERT-base&#xff09; 4. 初始化 TransformerEncoder5. Transformer Encoder 的…...

编程日记 2024/12/1 17:01:41

图像小波去噪与总变分去噪详解与Python实现

目录 图像小波去噪与总变分去噪详解与实现1. 基础概念1.1 噪声类型及去噪问题定义1.2 小波去噪算法基础1.3 总变分去噪算法基础2. 小波去噪算法2.1 理论介绍2.2 Python实现及代码详解2.3 案例分析3. 总变分去噪算法3.1 理论介绍3.2 Python实现及代码详解3.3 案例分析4. 两种算法…...

编程日记 2024/12/1 16:59:36

【深度学习基础】预备知识 | 微积分

【作者主页】Francek Chen 【专栏介绍】 ⌈ ⌈ ⌈PyTorch深度学习 ⌋ ⌋ ⌋ 深度学习 (DL, Deep Learning) 特指基于深层神经网络模型和方法的机器学习。它是在统计机器学习、人工神经网络等算法模型基础上&#xff0c;结合当代大数据和大算力的发展而发展出来的。深度学习最重…...

编程日记 2024/12/1 16:58:34

CTF-PWN glibc源码阅读[1]: 寻找libc中堆结构的定义(2.31-0ubuntu9.16)

源代码在这里下载 来到malloc/malloc.c 在980行发现这段代码 // 定义最大 mmap 值为 -4 #define M_MMAP_MAX -4// 如果没有定义 DEFAULT_MMAP_MAX&#xff0c;则将其定义为 65536 #ifndef DEFAULT_MMAP_MAX #define DEFAULT_MMAP_MAX (65536) #endif// 引…...

编程日记 2024/12/1 16:57:33

宏集eXware物联网网关在水务管理系统上的应用

一、前言 水务管理系统涵盖了对城市水网、供水、排水、污水处理等多个环节的监控与管理。随着物联网&#xff08;IoT&#xff09;技术的快速发展&#xff0c;物联网网关逐渐成为水务管理系统中的关键组成部分。 宏集物联网网关以其高效的数据采集、传输和管理功能&#xff0c…...

编程日记 2024/12/1 16:54:30

【大数据学习 | Spark-SQL】定义UDF和DUAF，UDTF函数

1. UDF函数&#xff08;用户自定义函数&#xff09; 一般指的是用户自己定义的单行函数。一进一出&#xff0c;函数接受的是一行中的一个或者多个字段值&#xff0c;返回一个值。比如MySQL中的&#xff0c;日期相关的dateDiff函数&#xff0c;字符串相关的substring函数。 先…...

编程日记 2024/12/1 16:52:27

#Java-JDK7、8的时间相关类，包装类

1. JDK7-Date类 我们先来看时间的相关知识点 世界标准时间: 格林尼治时间/格林威治时间(Greenwich Mean Time)简称GMT。目前世界标准时间(UTC)已经替换为:原子钟中国标准时间: 世界标准时间8小时 时间单位换算: 1秒1000毫秒 1毫秒1000微秒 1微秒1000纳秒 Date类 Date类…...

编程日记 2024/12/1 16:51:26

tc 命令

Windows Network Shaper目前只能在win10及以下版本使用&#xff0c;在github上有源码。 iperf 是一个网络性能测试工具&#xff0c;可以测试网络带宽和延迟。 webrtc M96版本的GCC sudo tc qdisc del dev eth1 root //关闭限速 sudo tc qdisc add dev eth1 root handle 1: ht…...

编程日记 2024/12/1 16:50:23

基于Java Springboot 协同过滤算法音乐推荐系统

一、作品包含 源码数据库设计文档万字全套环境和工具资源部署教程 二、项目技术 前端技术&#xff1a;Html、Css、Js、Vue2、Element-ui 数据库&#xff1a;MySQL 后端技术&#xff1a;Java、Spring Boot、MyBatis 三、运行环境 开发工具&#xff1a;IDEA 数据库&#x…...

编程日记 2024/12/1 16:49:21

MyBatis框架-关联映射

MyBatis关联映射-一对一 1.1 实体关系 实体–数据实体&#xff0c;实体关系指的就是数据与数据之间的关系 例如&#xff1a;订单和商品&#xff0c;用户和角色 实体关系分为以下四种&#xff1a; **一对一关联&#xff1a;**用户表和用户详情表 数据表关系&#xff1a; 主键关…...

编程日记 2024/12/1 16:48:19

asp源码网站/图片优化网站

1.列表生成式 # 单层循环: 生成一个列表,列表元素为[1*1,2*2...9*9] print([i*i for i in range(1,10)])输出结果如下: [1, 4, 9, 16, 25, 36, 49, 64, 81]# 多层循环: print([ ij for i in ABC for j in XYZ])输出结果如下: [AX, AY, AZ, BX, BY, BZ, CX, CY, CZ]# 循环判断语…...

编程日记 2025/1/12 20:53:25

wordpress菜单导入导出/搜索排名优化公司

Plates 是原生 PHP 模板系统&#xff0c;非常容易使用和扩展&#xff0c;灵感来源于 Twig 模板引擎&#xff0c;包括现代化的模板语言功能。Plates 主要是为在编译模板语言中选择使用原生 PHP 模板的开发者提供的。Here is a simple example of how to use Plates. We will ass…...

编程日记 2025/1/12 20:18:46

中国万网轻云服务器 如何发布网站/如何建立自己的网站平台

mysql数据库中">以百度地图的Place API为例&#xff0c;在vs2010中获取某一类型(如酒店)的POI数据(以xml文件方式存储)&#xff0c;并导入mysql数据库中。第一步&#xff1a;打开vs2010&#xff0c;并建立一个windows窗体应用程序&#xff0c;在窗体中添加主要的控件和…...

编程日记 2025/1/12 18:23:44

建筑网官网软件/泉州seo报价

符号键&#xff08;CTRL开头&#xff09; CTRL1 PROPCLOSEOROPEN 对象特性管理器CTRL2或4 ADCENTER 设计中心CTRL3 CTOOLPALETTES 工具选项板CTRL8或QC QuickCalc 快速计算器控制键CTRLA AI_SELALL 全部选择CTRLC或CO/CP COPYCLIP或COpy 复制CTRLD或F6 COORDINATE 坐标CTRLE或F…...

编程日记 2025/1/12 12:46:50

大学城网站开发公司/廊坊seo

学习于&#xff1a; https://www.bilibili.com/video/av29268873/?p23 《鸟哥的linux私房菜》先让我们来看看进程的虚拟地址中的0~3g用户空间的存储&#xff1a;正文即代码段&#xff0c;初始化的数据段&#xff0c;未初始化的数据即bss段。bss段和初始化的数据段加在一起就是…...

编程日记 2025/1/12 9:38:12

wordpress 更新url/网站快速排名

1、PNP逻辑数据库。 LOOP获取信息类型数据。 TABLES: PERNR . INFOTYPES: 0000, 0001 .START-OF-SELECTION.GET PERNR .LOOP AT P0000 WHERE ......ENDLOOP.LOOP AT P0001 WHERE ......ENDLOOP. 宏获取信息类型数据。 TABLES: PERNR, T001P. INFOTYPES: 0000, 0001 .GET PERNR …...

编程日记 2025/1/12 4:45:44