Go 协程上下文切换的代价
在 Go 语言中,协程(Goroutine)是一种非常轻量级的并发执行单元,设计之初就是为了简化并发编程并提高性能。协程的上下文切换被认为是非常高效的,但是它的真正性能优势需要我们深入了解其背后的机制。
本文将深入探讨 Go 协程的上下文切换机制,分析它的效率和潜在的代价,同时通过代码示例帮助大家理解其工作原理和性能影响。
1. 什么是 Go 协程的上下文切换?
上下文切换(Context Switch)指的是 CPU 从一个协程(或线程)切换到另一个协程的过程。在 Go 中,协程的上下文切换相对轻量级,因为 Go 的调度器在用户空间进行协程调度,而不是依赖操作系统内核。协程的上下文切换不需要操作系统内核的干预,意味着它们的切换开销远低于传统线程的上下文切换。
1.1 协程的调度模型
Go 采用的是一种基于 M:N 的调度模型:
- M:表示操作系统中的物理线程(或者叫 P)。
- N:表示 Go 协程的数量。
Go 的调度器会将多个 Goroutine 调度到少量的操作系统线程上。每当 Goroutine 被阻塞时,调度器会尝试将其他 Goroutine 调度到相同的操作系统线程上,从而避免了线程上下文切换的代价。
1.2 协程的上下文切换的特点
Go 协程的上下文切换与操作系统线程的上下文切换有很大的不同:
- 协程是轻量级的:它们在用户空间进行调度,没有内核干预,内存占用少。
- 上下文切换快:Go 协程的上下文切换主要是保存和恢复寄存器、栈等少量的状态,开销相对较小。
- 无须操作系统线程切换:与线程相比,Go 协程的切换不需要切换内核线程,因此能显著减少调度开销。
1.3 Go 协程的调度与栈
Go 协程在创建时,内存占用较小,默认栈大小为 2KB。Go 的调度器会根据需要动态调整栈的大小(随着协程的栈深度增长),从而使得多个协程能够共享相同的操作系统线程,进一步减少了内存占用和上下文切换的代价。
2. 协程上下文切换的代价
尽管 Go 协程的上下文切换比传统线程的切换要高效,但它仍然有一些代价,特别是在高并发场景下:
2.1 上下文切换的开销
虽然 Go 协程的上下文切换开销相对较小,但它并不是零成本的。每次上下文切换时,Go 调度器需要执行以下操作:
- 保存当前协程的状态(寄存器、栈指针等)。
- 恢复下一个协程的状态。
- 更新调度器的队列和调度信息。
- 如果某个协程被阻塞(如 I/O 操作),需要将其挂起,并在适当的时候唤醒。
这些操作会消耗 CPU 时间,因此,如果协程频繁切换或存在过多的协程,可能会导致性能下降。
2.2 高并发中的挑战
在高并发场景下,协程的上下文切换开销可能会影响性能。特别是当协程的数量非常大时(比如数万甚至更多),频繁的上下文切换可能导致 CPU 资源被浪费在调度上,而不是实际的计算任务上。
- 调度压力:如果协程的数量过多,调度器的管理和切换操作可能会产生显著的开销。
- 缓存失效:频繁的上下文切换可能导致 CPU 缓存失效,因为协程间的局部性差异较大,频繁切换可能导致缓存被清空,影响性能。
3. 性能测试:协程上下文切换的开销
为了帮助理解 Go 协程上下文切换的代价,我们通过代码示例来进行一些简单的性能测试。以下是一个简单的性能测试示例,比较了在不同数量的 Goroutine 和上下文切换下的性能表现。
3.1 示例 1:测试协程上下文切换的代价
package mainimport ("fmt""sync""time"
)// 测试协程上下文切换的开销
func testGoroutineSwitching(numGoroutines int) {var wg sync.WaitGroupwg.Add(numGoroutines)start := time.Now()// 创建多个 Goroutinefor i := 0; i < numGoroutines; i++ {go func() {// 每个 Goroutine 执行简单的计算任务for j := 0; j < 1000; j++ {_ = j * j // 模拟一些计算任务}wg.Done()}()}// 等待所有 Goroutine 完成wg.Wait()duration := time.Since(start)fmt.Printf("Total time for %d goroutines: %v\n", numGoroutines, duration)
}func main() {// 测试不同数量的 Goroutinefor _, num := range []int{100, 1000, 10000, 50000} {testGoroutineSwitching(num)}
}
3.2 代码解释
- 我们创建了多个 Goroutine,每个 Goroutine 执行一个简单的计算任务(在此只是模拟一些计算操作)。
- 我们分别测试了不同数量的 Goroutine(如 100, 1000, 10000, 50000)在执行时所需要的时间。
- 通过比较不同数量的 Goroutine 执行时间,我们可以观察到随着 Goroutine 数量的增加,执行时间的变化情况,从而间接了解上下文切换的代价。
3.3 结果分析
假设我们运行了上面的代码,以下是可能的输出(实际输出可能会受到机器性能、操作系统调度等因素的影响):
Total time for 100 goroutines: 5.3ms
Total time for 1000 goroutines: 40ms
Total time for 10000 goroutines: 300ms
Total time for 50000 goroutines: 1500ms
从这个结果中我们可以看出,随着 Goroutine 数量的增加,执行时间明显增加。虽然每个 Goroutine 执行的任务非常简单,但随着 Goroutine 数量的增加,调度器的上下文切换开销也逐渐显现出来。
4. 如何优化协程上下文切换
虽然 Go 协程的上下文切换相对高效,但在高并发场景下,过多的协程仍然可能导致性能下降。为了减少上下文切换的开销,可以考虑以下几种优化方法:
4.1 限制 Goroutine 的数量
避免创建过多的 Goroutine。可以使用 工作池(Worker Pool)模式,将任务分配给固定数量的 Goroutine 进行处理,避免协程数量过多带来的调度开销。
4.2 使用通道(Channels)控制协程数量
通道(Channels)是 Go 语言中的一个重要特性,可以用于协程间的通信和同步。通过通道来控制并发数量,从而限制协程的数量和调度的频繁程度。
4.3 使用 sync.Pool 来复用对象
如果协程中处理的数据对象比较复杂,可以使用 sync.Pool
来复用对象,从而减少内存分配和垃圾回收的压力,间接减少上下文切换的代价。
4.4 优化任务分配策略
尽量避免让大量的协程争用少数的资源(如 CPU、内存等)。合理分配任务,避免过多的协程切换到同一操作系统线程上执行,从而减少资源竞争。
5. 总结
Go 协程的上下文切换相对于操作系统线程的上下文切换而言非常轻量级,但在高并发场景下,频繁的上下文切换仍然可能带来一定的性能开销。尽管如此,Go 协程的设计和调度模型使得它们在绝大多数应用场景中仍然非常高效。
提升性能的策略:
- 限制协程的数量,避免过多的协程导致调度开销过大。
- 使用工作池、通道、
sync.Pool
等方式控制协程的创建和销毁。 - 在设计系统时尽量避免频
繁的上下文切换,合理安排任务和资源的分配。
相关文章:
Go 协程上下文切换的代价
在 Go 语言中,协程(Goroutine)是一种非常轻量级的并发执行单元,设计之初就是为了简化并发编程并提高性能。协程的上下文切换被认为是非常高效的,但是它的真正性能优势需要我们深入了解其背后的机制。 本文将深入探讨 …...
HTTP 持久连接(长连接)
HTTP 持久连接(长连接) HTTP 持久连接(HTTP Persistent Connections),也常被称作 HTTP 长连接,是 HTTP 协议中的一种重要特性,以下是关于它的详细介绍: 一、基本概念 在传统的 HTT…...

12月10日IO
作业:使用read和write实现拷贝文件,将1.txt内容前一半拷贝给2.txt后一半拷贝给3.txt #include <myhead.h>int main(int argc, const char *argv[]) {//打开三个文件int fd1,fd2,fd3;fd1open("1.txt",O_RDONLY);fd2open("2.txt&quo…...
Composite Pattern
Composite Pattern The intent of Composite pattern is to composite objects into tree structures to represent a “part-whole” hierarchy .The Composite Pattern allow clients to treat individual objects and composite objects uniformly. UML Used in Qt Exam…...
Springboot MVC
1. Springboot为MVC提供的自动配置 Spring Boot 为 Spring MVC 提供了自动配置,这在大多数应用程序中都能很好地工作。除了已经实现了 Spring MVC 的默认功能外,自动配置还提供了以下特性: 包括 ContentNegotiatingViewResolver 和 BeanNam…...
MySQL数据表记录增操作
对数据库的操作用的最最频繁的呢,总结起来就四个字:增删改查! 查是属于DQL(Data QueryLanguage ,数据查询语言)部分,而增、改、删属于DML(Data Manipulation Language, 数据操纵语言) 增:作用是往数据库的数据表里写入记录值 语…...

maven报错“找不到符号“
问题 springboot项目 maven编译打包过程,报错"找不到符号" 解决 很多网上方法都试过,都没用 换jdk,把17->21...

python进阶-05-利用Selenium来实现动态爬虫
python进阶-05-利用Selenium来实现动态爬虫 一.说明 这是python进阶部分05,我们上一篇文章学习了Scrapy来爬取网站,但是很多网站需要登录才能爬取有用的信息,或者网站的静态部分是一个空壳,内容是js动态加载的,或者人机验证&…...
P1226 【模板】快速幂
题目描述 给你三个整数 𝑎,𝑏,𝑝求 𝑎𝑏 mod 𝑝 输入格式 输入只有一行三个整数,分别代表 𝑎,𝑏,𝑝 输出格式 输出一行一个字符串 a^b mod ps…...

【C++】求第二大的数详细解析
博客主页: [小ᶻ☡꙳ᵃⁱᵍᶜ꙳] 本文专栏: C 文章目录 💯前言💯题目描述💯输入描述💯解题思路分析1. 题目核心要求2. 代码实现与解析3. 核心逻辑逐步解析定义并初始化变量遍历并处理输入数据更新最大值与次大值输…...

从零开始学TiDB(3)TiKV 持久化机制
如图,每个TiKV有两个rocksdb实例,rocksdbKV复制存储键值对,rocksdb raft负责存储复制的日志 。 每个region及其副本构成了raft group。这个OB的Zone其实有点类似,在OB中每个Unit及其副本构成了paxos组,在TiDB中叫raft…...
Elasticsearch+Kibana+IK分词器+拼音分词器安装
目录 ES报错 Kibanaik分词器拼音分词器 安装都比较简单,可以参考这几篇博客 ES 如何在 Linux,MacOS 及 Windows 上进行安装 Elasticsearch 报错 ES启动报错error downloading geoip database [GeoLite2-ASN.mmdb] Kibana KIBANA的安装教程ÿ…...

子网划分实例
看到有人问这个问题: 想了一下,这是一个子网划分的问题: 处理方法如图: 这是一个子网划分的问题 设备1用三层交换机,端口设置为路由模式,设备2和设备3为傻瓜交换机模式 设备2和设备3下挂设备都是26为掩码&…...

上海亚商投顾:创业板指震荡调整 机器人概念股再度爆发
上海亚商投顾前言:无惧大盘涨跌,解密龙虎榜资金,跟踪一线游资和机构资金动向,识别短期热点和强势个股。 一.市场情绪 沪指昨日冲高回落,深成指、创业板指盘中跌超1%,尾盘跌幅有所收窄。机器人概念股逆势爆…...
【C++ 20进阶(2):初始化 Initializer
【C 20进阶(2):初始化 Initializer】 原文:https://blog.csdn.net/weixin_44259356/article/details/144377955 引言 本篇文章为系列文章将着重介绍C20新特性,一是希望可以和大家交流分享,二是也便于自己…...

【重生之我在B站学MySQL】
MySQL笔记 文章目录 MySQL的三层结构SQL语句分类sql语句数据库操作创建数据库查看、删除数据库 表操作创建表mysql常用数据类型(列类型)查询表、插入值创建表练习创建一个员工表emp 修改表mysql约束primary key(主键)not null(非空)unique(唯一)foreign key(外键)check自增长 索…...

Python实现中国象棋
探索中国象棋 Python 代码实现:从规则逻辑到游戏呈现 中国象棋,这款源远流长的棋类游戏,承载着深厚的文化底蕴与策略智慧。如今,借助 Python 与 Pygame 库,我们能够在数字世界中复刻其魅力,深入探究代码背后…...

LBS 开发微课堂|通过openGL ES轻松实现建筑物渲染及动画
为了让广大开发者 更深入地了解 百度地图开放平台的 技术能力 轻松掌握满满的 技术干货 更加简单地接入 位置服务 我们特别推出了 “位置服务(LBS)开发微课堂” 系列技术案例 第五期的主题是 通过openGL ES轻松实现 建筑物渲染及动画 对于…...
map1[item.id]和map1.get(item.id)的区别为何前者取出的是空,后者取出的是正确的值
在 JavaScript 中,map1[item.id] 和 map1.get(item.id) 用于从 Map 对象中获取值,但它们的工作方式有所不同: map1[item.id]:这种方式用于普通对象(Object),它将 item.id 作为键来获取对应的值…...
window端sqlplus连接linux_oracle11g
1. 环境配置回顾 下载 Oracle Instant Client:根据查询到的版本到链接: oracle官网下载对应版本的三个文件(比如我这里查询到的版本是12.2.0.1.0): instantclient-basic-windows.x64-12.2.0.1.0.zip instantclient-sqlplus-win…...
零门槛NAS搭建:WinNAS如何让普通电脑秒变私有云?
一、核心优势:专为Windows用户设计的极简NAS WinNAS由深圳耘想存储科技开发,是一款收费低廉但功能全面的Windows NAS工具,主打“无学习成本部署” 。与其他NAS软件相比,其优势在于: 无需硬件改造:将任意W…...

Cilium动手实验室: 精通之旅---20.Isovalent Enterprise for Cilium: Zero Trust Visibility
Cilium动手实验室: 精通之旅---20.Isovalent Enterprise for Cilium: Zero Trust Visibility 1. 实验室环境1.1 实验室环境1.2 小测试 2. The Endor System2.1 部署应用2.2 检查现有策略 3. Cilium 策略实体3.1 创建 allow-all 网络策略3.2 在 Hubble CLI 中验证网络策略源3.3 …...

UR 协作机器人「三剑客」:精密轻量担当(UR7e)、全能协作主力(UR12e)、重型任务专家(UR15)
UR协作机器人正以其卓越性能在现代制造业自动化中扮演重要角色。UR7e、UR12e和UR15通过创新技术和精准设计满足了不同行业的多样化需求。其中,UR15以其速度、精度及人工智能准备能力成为自动化领域的重要突破。UR7e和UR12e则在负载规格和市场定位上不断优化…...
Device Mapper 机制
Device Mapper 机制详解 Device Mapper(简称 DM)是 Linux 内核中的一套通用块设备映射框架,为 LVM、加密磁盘、RAID 等提供底层支持。本文将详细介绍 Device Mapper 的原理、实现、内核配置、常用工具、操作测试流程,并配以详细的…...

html-<abbr> 缩写或首字母缩略词
定义与作用 <abbr> 标签用于表示缩写或首字母缩略词,它可以帮助用户更好地理解缩写的含义,尤其是对于那些不熟悉该缩写的用户。 title 属性的内容提供了缩写的详细说明。当用户将鼠标悬停在缩写上时,会显示一个提示框。 示例&#x…...

【VLNs篇】07:NavRL—在动态环境中学习安全飞行
项目内容论文标题NavRL: 在动态环境中学习安全飞行 (NavRL: Learning Safe Flight in Dynamic Environments)核心问题解决无人机在包含静态和动态障碍物的复杂环境中进行安全、高效自主导航的挑战,克服传统方法和现有强化学习方法的局限性。核心算法基于近端策略优化…...

深度学习水论文:mamba+图像增强
🧀当前视觉领域对高效长序列建模需求激增,对Mamba图像增强这方向的研究自然也逐渐火热。原因在于其高效长程建模,以及动态计算优势,在图像质量提升和细节恢复方面有难以替代的作用。 🧀因此短时间内,就有不…...
CRMEB 中 PHP 短信扩展开发:涵盖一号通、阿里云、腾讯云、创蓝
目前已有一号通短信、阿里云短信、腾讯云短信扩展 扩展入口文件 文件目录 crmeb\services\sms\Sms.php 默认驱动类型为:一号通 namespace crmeb\services\sms;use crmeb\basic\BaseManager; use crmeb\services\AccessTokenServeService; use crmeb\services\sms\…...
Linux系统部署KES
1、安装准备 1.版本说明V008R006C009B0014 V008:是version产品的大版本。 R006:是release产品特性版本。 C009:是通用版 B0014:是build开发过程中的构建版本2.硬件要求 #安全版和企业版 内存:1GB 以上 硬盘…...
在 Spring Boot 项目里,MYSQL中json类型字段使用
前言: 因为程序特殊需求导致,需要mysql数据库存储json类型数据,因此记录一下使用流程 1.java实体中新增字段 private List<User> users 2.增加mybatis-plus注解 TableField(typeHandler FastjsonTypeHandler.class) private Lis…...