当前位置：首页 > news >正文

vscode如何debug环境配置？torchrun与deepspeed库又该如何配置？

news 文章来源：https://blog.csdn.net/weixin_38252409/article/details/143210403 2024/11/2 2:25:13

文章目录

前言
一、vscode命令参数传递
- 1、验证参数py文件
- 2、第一种vscode调用方法(launch.json配置)
- 3、第二种vscode调用方法(launch.json配置)
二、deepspeed运行py文件代码(deepspeed_test.py)
三、deepspeed命令调用(无法debug)
四、deepspeed使用vscode进行调试(能debug)
五、vscode执行类似sh命令调试总结(能debug)
- 1、launch.json的args、program、justMyCode、env参数说明
- 2、python **.py 命令执行
- 3、deepspeed 命令执行
总结

前言

本文验证完成基于vscode对deepspeed进行debug方法。特别的，该方式不仅适合deepspeed命令debug，也适用torchrun命令debug，更能延伸其它命令debug模式。本文内容分为三部分，第一部分介绍如何使用vscode传递参数debug；第二部分介绍如何使用deepspeed进行debug；第三部分介绍vscode通用命令方式进行debug。

大模型扩充内容！

源码路径：点击这里

一、vscode命令参数传递

验证python文件的argparse参数传递，或者是命令使用–param的参数传递方式，第一个列子使用常规python调用，我将写一个简单py文件，然后在说明vscode如何配置launch.json文件。

1、验证参数py文件

代码很简单，大家可直接查看，文件名为test_py.py,如下：

相关文章：

vscode如何debug环境配置？torchrun与deepspeed库又该如何配置？

文章目录前言一、vscode命令参数传递1、验证参数py文件2、第一种vscode调用方法(launch.json配置)3、第二种vscode调用方法(launch.json配置)二、deepspeed运行py文件代码(deepspeed_test.py)三、deepspeed命令调用(无法debug)四、deepspeed使用vscode进行调试(能debug)五、vs…...

编程日记 2024/10/27 22:41:19

Qt元对象系统 —— 信号与槽

信号与槽讨论的是Qt对象之间的连接与交互。我们就是使用这种方式实现了一个简单的异步调用。换而言之，信号与槽让我们可以不必考虑复杂的调用。只需要当我们需要在程序中表达：“希望在程序中通知一个事件而且按照我们设定的方式给出回应”的时候&#xf…...

编程日记 2024/10/27 22:40:19

单细胞配色效果模拟器 | 简陋版（已有颜色数组）

目的：假设你有一组颜色了，怎么模拟查看它们在单细胞DimPlot中的美学效果呢？要足够快，还要尽可能有模拟效果。 1. 尝试1: 随机矩阵，真的UMAP降维后绘图（失败） 造一个随机矩阵，使用S…...

编程日记 2024/10/27 22:39:18

面向对象编程中类与类之间的关系(一)

目录 1.引言 2."有一个"关系 3."是一个"关系(继承) 4.“有一个”与“是一个”的区别 5.not-a关系 6.层次结构 7.多重继承 8.混入类 1.引言作为程序员，必然会遇到这样的情况：不同的类具有共同的特征，至少看起来彼…...

编程日记 2024/10/27 22:36:14

streamlit 实现 flink SQL运行界面

实现效果 streamlit flink-playground.py 文件如下： import streamlit as st import io import contextlib import sys import os import uuid import subprocess from jinja2 import Templatest.set_page_config(layout"wide")# 设置页面标题 st.title…...

编程日记 2024/10/27 22:31:09

鲸鱼优化算法（Whale Optimization Algorithm, WOA）原理与MATLAB例程

鲸鱼优化算法（Whale Optimization Algorithm, WOA）是一种基于鲸鱼捕食行为的智能优化算法。它模拟了座头鲸在狩猎时的“气泡网”捕食策略。文章目录 1.适应度函数2. 更新公式2.1 突袭行为2.2 螺旋更新3.线性递减参数4. 边界处理 MATLAB 实现示例代码说明…...

编程日记 2024/10/27 22:30:08

MFC七段码显示实例

在MFC中添加iSenvenSegmentAnalogX控件，添加编辑框和按钮实现在编辑框中输入数字点击按钮后数字用七段码显示 1、在对话框中点击右键如下图添加控件和变量 2、在sevenDlg.h中添加代码 public: void ShowInd(int,double);3、在sevenDlg.cpp中添加代码 void CSe…...

编程日记 2024/10/27 22:29:07

【日常知识点】到底推不推荐用JWT?

👉博主介绍：博主从事应用安全和大数据领域，有8年研发经验，5年面试官经验，Java技术专家，WEB架构师，阿里云专家博主，华为云云享专家，51CTO 专家博主 ⛪️ 个人社区：个人社区 💞 个人主页：个人主页 🙉 专栏地址： ✅ Java 中级 🙉八股文专题：剑指大厂，手撕 J…...

编程日记 2024/10/27 22:27:05

网络编程项目之FTP服务器

项目介绍模拟FTP核心原理：客户端连接服务器后，向服务器发送一个文件。文件名可以通过参数指定，服务器端接收客户端传来的文件（文件名随意），如果文件不存在自动创建文件，如果文件存在&#xff0…...

编程日记 2024/10/27 22:26:03

SpringBoot02：第一个springboot程序

3、第一个springboot程序 3.1、准备工作我们将学习如何快速的创建一个Spring Boot应用，并且实现一个简单的Http请求处理。通过这个例子对Spring Boot有一个初步的了解，并体验其结构简单、开发快速的特性。我的环境准备： java version "…...

编程日记 2024/10/27 22:25:01

快速入门HTML

欢迎关注个人主页：逸狼创造不易，可以点点赞吗如有错误，欢迎指出~ 目录第一个html文件标签 h1~h6 p >段落标签 br > 换行标签 img >图片标签 a >超链接标签表格标签表单标签表单控件 form表单⽆语义标签:div&span 综…...

编程日记 2024/10/27 22:23:59

RabbitMQ是一个开源的消息代理和队列服务器

RabbitMQ是一个开源的消息代理和队列服务器，它基于AMQP（Advanced Message Queuing Protocol，高级消息队列协议）协议实现，同时也支持其他消息协议如STOMP、MQTT等。作为一个可靠的消息传递服务，RabbitMQ在分…...

编程日记 2024/10/27 22:22:58

经典算法思想--并查集

前言 （最近在学习Java，所有函数都是用Java语言来书写的）前言部分是一些前提储备知识在并查集（Union-Find）数据结构中，rank（中文称为“秩”）是用来表示树的高度或深度的一种辅助信息…...

编程日记 2024/10/27 22:21:57

挑战Java面试题复习第2天，百折不挠

挑战第 2 天 ArrayList和linkedList的区别HashMap和HashTable的区别Collection 与 Collections 的区别Java的四种引用泛型常用特点 ArrayList和linkedList的区别底层数据结构： ArrayList：基于动态数组实现，支持快速随机访问。LinkedList&a…...

编程日记 2024/10/27 22:20:55

【vue之道】

vue之道 1. 一生二，二生万物思想2. 变化之律3. 变化之实在哪？4.而后学于形乃已！4.1 展示之形变4.2 动之气谓之指令4.3 血之养分的载体，于vue之绑定载具4.4 vue之道（万法规一篇） 1. 一生二，二生万…...

编程日记 2024/10/27 22:15:50

基于麻雀优化算法SSA的CEEMDAN-BiLSTM-Attention的预测模型

往期精彩内容： 时序预测：LSTM、ARIMA、Holt-Winters、SARIMA模型的分析与比较全是干货 | 数据集、学习资料、建模资源分享！ EMD、EEMD、FEEMD、CEEMD、CEEMDAN的区别、原理和Python实现（一）EMD-CSDN博客 EMD、EEM…...

编程日记 2024/10/27 22:13:48

Linux：指令再认识

文章目录前言一、知识点1. Linux下一切皆文件，也就是说显示器也是一种文件2. 指令是什么？3. ll 与 ls -l4. 日志5. 管道6. 时间戳二、基本指令1. man指令2. cp指令3. mv指令4. 查看文件1）cat/tac指令——看小文件2）more/less指令…...

编程日记 2024/10/27 22:09:44

PHP如何抛出和接收错误

在PHP中，抛出和接收错误通常涉及异常处理机制，以及错误和异常的处理函数。以下是如何在PHP中抛出和接收错误的详细指南： 抛出错误（异常） 在PHP中，你可以使用throw关键字来抛出一个异常。这通常在你检测到…...

编程日记 2024/10/27 22:08:43

计算机网络：网络层 —— IPv4 地址的应用规划

文章目录 IPv4地址的应用规划定长的子网掩码变长的子网掩码 IPv4地址的应用规划 IPv4地址的应用规划是指将给定的 IPv4地址块 (或分类网络)划分成若干个更小的地址块(或子网)，并将这些地址块(或子网)分配给互联网中的不同网络，进而可以给各网络中的主机…...

编程日记 2024/10/27 22:07:42

Mongodb命令大全

Mongodb命令大全一、数据库相关命令二、集合相关命令三、文档(数据)相关命令1、_id 字段说明2、查询2.1、查询操作符2.2、内嵌文档查询2.3、数组文档查询2.4、去重查询2.5、查询排序 sort2.6、分页查询2.7、指定列投影查询返回2.8、查询统计个数 count 3、聚合查询3.1、查询用…...

编程日记 2024/10/27 22:06:42

宇视设备视频平台EasyCVR视频融合平台果园/鱼塘/养殖场/菜园有电没网视频监控方案

在那些有电无网的偏远地区，如果园、鱼塘、养殖场或菜园，视频监控的实现面临着独特的挑战。宇视设备视频平台EasyCVR提供了一种创新的解决方案，通过结合太阳能供电和4G摄像头技术，有效地解决了这些场景下的监控需求。在有电没网的…...

编程日记 2024/10/27 22:05:41

面试题：ABCD四个线程，A线程最后执行

我觉得是一个很高频的面试题，ABCD四个线程，A线程要等到BCD线程执行完再执行，怎么做因为我刚复习完AQS，所以立马想到了CountDownLatch，但是看面试官反应他最想听到的应该是join方法，所以面试后就总结了几种…...

编程日记 2024/10/27 22:04:39

代码随想录算法训练营第46期Day43

leetcode.322零钱兑换 class Solution { public: //无限个硬币->完全背包int coinChange(vector<int>& coins, int amount) {vector<int> dp(10010,INT_MAX);//dp代表的在某个数值下最小的硬币数，要求是最小的硬币数，所以初始值要尽可…...

编程日记 2024/10/27 22:03:38

前端处理API接口故障：多接口自动切换的实现方案

因为在开发APP，一个接口如果不通（被挂了）又不能改了重新打包让用户再下载软件更新，所以避免这种情况，跟后端讨论多备用接口地址自动切换的方案，自动切换到备用的接口地址，并保证后续所有的请求都…...

编程日记 2024/10/27 22:01:36

多租户架构的全景分析(是什么？基本概念、实现策略、资源管理和隔离、数据安全与隔离、性能优化、扩展性与升级、案例研究)

文章目录 1. 多租户的基本概念2. 多租户的实现策略2.1 独立数据库模式2.2 共享数据库-独立Schema模式2.3 共享数据库-共享Schema模式 3. 资源管理和隔离4. 数据安全与隔离5. 性能优化6. 扩展性与升级7. 案例研究总结多租户架构在云计算和SaaS应用中越来越流行，因为…...

编程日记 2024/10/27 21:59:34

Git使用问题汇总附带解决方法（持续更新）

Git使用问题汇总附带解决方法一 git pull 代码时报错： Auto packing the repository in background for optimum performance. See “git help gc“ 一 git pull 代码时报错： Auto packing the repository in background for optimum performance. See …...

编程日记 2024/10/27 21:58:34

Spring Boot驱动的植物健康监测革命

1系统概述 1.1 研究背景随着计算机技术的发展以及计算机网络的逐渐普及，互联网成为人们查找信息的重要场所，二十一世纪是信息的时代，所以信息的管理显得特别重要。因此，使用计算机来管理植物健康系统的相关信息成为必然。开发合适…...

编程日记 2024/10/27 21:56:32

element 中 el-dialog 在不同的文件中使用

在实际中工作，我们经常需要使用 el-dialog 来做一个弹框的功能。最常见的就是在父组件中点击一个按纽，然后弹出一个框。而这个框就是子组件。同时，父子组件是分布在不同的文件中。  <template> <div> <…...

编程日记 2024/10/27 21:55:31

QT中采用QCustomPlot 实现将buffer中的数据绘制成折线图，并且图形随着数据更新而更新

QT中采用QCustomPlot 实现将buffer中的数据绘制成折线图，并且图形随着数据更新而更新为了在 Qt 中将缓冲区的数据动态绘制成折线图，并随着数据的更新而实时更新，可以使用 QCustomPlot 或 Qt 自带的绘图功能，比如 QGraphicsView，或者在更简单的情况下使用 QPainter 在 QW…...

编程日记 2024/10/27 21:54:30

1688API商品详情接口如何获取

获取 1688API商品详情接口主要有以下步骤： 一、注册开发者账号： 访问 1688 开放平台，进行开发者账号注册。这是获取 API 接口使用权限的第一步，注册信息要确保真实准确。二、了解接口规范和政策： 在 1688 开放平台…...

编程日记 2024/10/27 21:51:27

制作网站怎么做导航栏/汕头seo网站建设

游标的属性返回值类型意义%ROWCOUNT整型获得FETCH语句返回的数据行数%FOUND布尔型最近的FETCH语句返回一行数据则为真，否则为假%NOTFOUND布尔型与%FOUND属性返回值相反%ISOPEN布尔型游标已经打开时值为真，否则为假看的懂~~~~~~~~~~~~~~~~~&#xff0…...

编程日记 2024/11/2 2:05:08

wordpress新用户管理/营销型网站策划书

构造高可用性和高可靠性系统的一项重要原则是假定失效（Design forfailure）。换言之，你的设计模型应具有正如亚马逊的首席技术官（CTO）沃纳•威格尔（Werner Vogels）曾说的“一切事物随时有可能失效…...

编程日记 2024/11/1 17:56:25

服务器网站301重定向怎么做/做百度推广销售怎么样

日常工作或学习中经常会接触很多PDF文档，有时其中有些图片是我们需要用到的，应该如何将这些图片从PDF文件中提取出来并且保存呢？我们可以用PDF编辑器来实现这个需求，首先用极速PDF编辑器打开我们需要处理的PDF文档后，通…...

编程日记 2024/11/1 16:51:00

做网站代理需要办什么执照/企业网站管理系统源码

密码错误频繁登录引发的”library cache lock”或”row cache lock”等待对于正常的系统，由于密码的更改，可能存在某些被遗漏的客户端，不断重复尝试使用错误密码登录数据库，从而引起数据库内部长时间的”library cache lock”或”…...

编程日记 2024/11/1 13:54:42

免费用的云服务器/seo网站排名软件

在这里插入代码片45个Vue开源项目汇总在过去的一年里，我们比较了将近 12,000 个 Vue.js 开源项目和库，从中挑选了最好的 45 个这些项目和库可以分为 3 类：1.用户界面（1~19）2.Vue.js 工具（20~36）3.项目（37~45）这是一个非常好的清单，精心挑选了 2018 年 1 月至 12 月期…...

编程日记 2024/11/1 11:17:50

榆林建设银行的网站/如何营销推广

题解： 时间超时的看这里： 用java 一不注意就容易时间超时，内存不足。所以如果没有高级函数之类的语法，可以用c和python 来做。除了比赛外，走java方向的，推荐用java 淦她。尽量用空间换时间，循环…...

编程日记 2024/11/1 10:57:10