当前位置： 首页 > news >正文

加载模型时出现 OSError: Unable to load weights from pytorch checkpoint file 报错的解决

news 文章来源：https://blog.csdn.net/weixin_45775438/article/details/129843457 2025/2/5 8:06:10

加载模型时出现 OSError: Unable to load weights from pytorch checkpoint file 报错的解决

  • 报错信息
  • 原因查明
  • 网传解决措施
  • 好消息
  • 我的解决措施

报错信息

  • 查了下，在网上还是个比较常见的报错
    一般为加载某模型时突然报错
    在这里插入图片描述

原因查明

  • 一般为下载某个 XXX_model.bin 的时候下载报错了
    而下载源可以看到为 HuggingFace

网传解决措施

  • 首先得看看你是下载哪个模型报错了。像我这里有一个中间模型，所以不知道是哪个低层模型下载报错了。
    打开 ~/.cache/huggingface/hub，这里 ~ 表示本机用户名
    若有多个模型，你可以看一下修改日期是今天的为哪个
    在这里插入图片描述
    这里发现，是模型 potsawee--t5-large-generation-squad-QuestionAnswer
    去 HuggingFace 上搜索相应模型，自行下载，比如我这里即为 网址
    在这里插入图片描述
    该文件下载到刚刚那个缓存文件夹中对应的放那些files的文件夹。
  • 做法二：删除该缓存文件夹中所有东西，再运行一遍代码。

好消息

  • 虽然貌似没有报错，但是加载 selfcheck_mqag 模型的时候内存完全吃完了，卡到死机也没跑完初始化，可能是没问题了只是太吃内存了
    对于一般的小模型该报错可能可以直接解决了。

我的解决措施

  • 既然本机实在是跑不了，大不了不跑本机，去 Colab 上跑
    见我的博客，关于Colab的简单应用

  • 首先代码放进去，然后先跑个 install 包命令
    在这里插入图片描述

  • 然后再运行代码
    在这里插入图片描述

  • 发现对于所有的文件，包括 bin 文件都成功安装。
    初始化成功，且不吃本机资源，nicenicenice
    在这里插入图片描述

  • yy：MQAG 也太 tm 吃资源了

相关文章：

加载模型时出现 OSError: Unable to load weights from pytorch checkpoint file 报错的解决

加载模型时出现 OSError: Unable to load weights from pytorch checkpoint file 报错的解决报错信息原因查明网传解决措施好消息我的解决措施报错信息 查了下，在网上还是个比较常见的报错 一般为加载某模型时突然报错 原因查明 一般为下载某个 XXX_model.bin 的…...

编程日记 2023/3/30 10:27:03

sessionStorage ， localStorage 和cookie的区别

一.sessionStorage(临时存储)sessionStorage是HTML5中新增的Web Storage API之一，用于在浏览器中存储键值对数据，与localStorage类似，但是sessionStorage存储的数据在会话结束时会被清除。可以通过以下方式使用sessionStorage：存储…...

编程日记 2023/4/18 22:45:18

C# 实例详解委托之Func、Action、delegate

委托是.NET编程的精髓之一，在日常编程中经常用到，在C#中实现委托主要有Func、Action、delegate三种方式，这个文章主要就这三种委托的用法通过实例展开讲解。 【Func】：Func是带返回值的委托： 原型函数如下(以下展示的…...

编程日记 2023/4/18 22:46:25

如何选电脑

1、CPU（中央处理器） 怎么看CPU型号：CPU:系列-代数等级核心显卡型号电压后缀 例如CPU:i7-10750H ： 1、系列：Intel的酷睿i3、i5、i7、i9这四个系列的CPU，数字越大就代表越高端。 2、代数：代表…...

编程日记 2023/3/30 10:11:59

SpringBoot项目创建

如果使用spring的源地址创建项目失败，就使用 阿里云的springBoot项目创建地址：https://start.aliyun.com/ 1.new 一个新的项目： 2.选择合适的版本java的JDK和maven项目 3.选择spring web依赖 4.直接finish 5. 删除无用的包，然后…...

编程日记 2023/4/19 5:35:23

神经衰弱该如何判断？确诊为神经衰弱，日常要做好这7大护理！

神经衰弱是由于长时间处于紧张或者压力的情况下导致精神出现兴奋或者疲乏现象而伴随着一系列症状。如情绪烦恼、容易激怒、睡眠障碍、肌肉出现紧张性疼痛等，生活中有很多人在自己的不到休息或者遇到强大打击时就会嘲笑自己患上神经衰弱。甚至一些会盲目采取措施&…...

编程日记 2023/4/18 22:48:48

Linux之进程替换

进程替换1.什么是进程替换2.替换函数2.1 execl函数2.2 execv函数2.3 execlp函数2.4 execvp函数2.5 在自己的C程序上如何运行其他语言的程序？2.6 execle 函数2.7 小结3.一个简易的shell1.什么是进程替换 fork()之后，父子各自执行父进程代码的一部分&…...

编程日记 2023/3/30 9:56:55

关于清除浮动

浮动最早是用来做图文排版，为了让块级元素同行显示，而html中块元素是有自己的排列规则，一般独占一行。所以有了浮动元素，一旦元素浮动了就会脱离文档流，产生问题。怎么去清除浮动：（1&#xff09…...

编程日记 2023/3/30 9:51:53

Uber H3 index 地图索引思考

H3 是 uber 设计的六边形空间索引，go 语言操作包是 h3-go，可以通过经纬度获取所在的 h3 六边形边界，每个经纬度对应的六边形都是确定的，每个六边形唯一对应了一个 h3index。在业务开发中，我们可以通过 h3index 来对地理…...

编程日记 2023/4/18 22:50:30

多线程的几种状态

Java-多线程的几种状态🔎1.NEW( 系统中线程还未创建,只是有个Thread对象)🔎2.RUNNABLE( (就绪状态. 又可以分成正在工作中和即将开始工作)🔎3.TERMINATED(系统中的线程已经执行完了,Thread对象还在)🔎4.TIMED_WAITING(指定时间等待…...

编程日记 2023/4/18 22:51:49

【算法题】1574. 删除最短的子数组使剩余数组有序

题目： 给你一个整数数组 arr ，请你删除一个子数组（可以为空），使得 arr 中剩下的元素是 非递减 的。 一个子数组指的是原数组中连续的一个子序列。 请你返回满足题目要求的最短子数组的长度。 示例 1： …...

编程日记 2023/3/30 9:36:50

理解对数——金融问题中的自然对数（以e为底的对数）

第3章 金融问题(Financial Matters)——金融问题中的自然对数If thou lend moneyto any ofMy people. ...thou shalt not beto him as a creditor;neither shall yelay upon him interest.(如果你借钱给我的任何人。 ……你不应该是他的债权人；也不可向他加息。)——…...

编程日记 2023/3/30 9:31:49

vue2进阶学习之路

HTML、CSS和JavaScript基础 在学习Vue2之前，需要掌握HTML、CSS和JavaScript的基础知识。包括HTML的标签、CSS的布局和样式、JavaScript的变量类型、条件语句、循环语句等。 Vue2的基础知识 掌握Vue2的基本概念和语法，包括Vue2实例、数据绑定、指令、组件…...

编程日记 2023/3/30 9:26:47

决策树ID3算法

1. 决策树ID3算法的信息论基础 机器学习算法其实很古老，作为一个码农经常会不停的敲if, else if, else,其实就已经在用到决策树的思想了。只是你有没有想过，有这么多条件，用哪个条件特征先做if，哪个条件特征后做if比较优呢&#…...

编程日记 2023/3/30 9:21:46

C++模板基础（一）

函数模板（一） ● 使用 template 关键字引入模板： template void fun(T) {…} – 函数模板的声明与定义 – typename 关键字可以替换为 class ，含义相同 – 函数模板中包含了两对参数：函数形参 / 实参；模板形…...

编程日记 2023/3/30 9:16:45

生产者消费者模型线程池（纯代码）

目录 生产者消费者模型 条件变量&&互斥锁（阻塞队列） makefile Task.hpp BlockQueue.hpp BlockQueueTest.cc 信号量&&互斥锁（环形队列） makefile RingQueue.hpp RingQueueTest.cc 线程池（封…...

编程日记 2023/3/30 9:11:42

K8s 应用的网络可观测性： Cilium VS DeepFlow

随着分布式服务架构的流行，特别是微服务等设计理念在现代应用普及开来，应用中的服务变得越来越分散，因此服务之间的通信变得越来越依赖网络，很有必要来谈谈实现微服务可观测性中越来越重要的一环——云原生网络的可观测。K8s 是微服务设计理念能落地的最重要的承载体，本文…...

编程日记 2023/3/30 9:06:41

3.29面试题

文章目录内存内存管理执行过程要点面试题内存 内存管理 由JVM管理 堆：new出来的对象（包括成员变量、数组元素、方法的地址）栈：局部变量（包括方法的参数）方法区：.class字节码文件（…...

编程日记 2023/3/30 9:01:40

操作系统漏洞发现

操作系统漏洞发现前言一、操作系统漏洞发现1.1 namp2. Goby3. Nessus二，进行渗透测试2.1 使用工具进行渗透1. metasploit2.2 EXP2.3 复现文章三，操作系统漏洞修复前言 不管是对于App来说，还是web站点来说，操作系统是必须的&#x…...

编程日记 2023/3/30 8:56:39

Linux gdb调试底层原理

TOC 前言 linux下gdb调试程序操作过程参考本人文章:gdb调试操作; 这里不再叙述; 本文主要内容是介绍GDB本地调试的底层调试原理，我们来看一下GDB是通过什么机制来控制被调试程序的执行顺序; 总结部分是断点调试的底层原理，可以直接跳转过去先看看大概…...

编程日记 2023/3/30 8:51:38

LC-1647. 字符频次唯一的最小删除次数（哈希+计数）

1647. 字符频次唯一的最小删除次数 难度中等56 如果字符串 s 中 不存在 两个不同字符 频次 相同的情况，就称 s 是 优质字符串 。 给你一个字符串 s，返回使 s 成为 优质字符串 需要删除的 最小 字符数。 字符串中字符的 频次 是该字符在字符串中的出现…...

编程日记 2023/3/30 8:46:37

HTTP状态码

100: 接受，正在继续处理 200: 请求成功，并返回数据 201: 请求已创建 202: 请求已接受 203: 请求成为，但未授权 204: 请求成功，没有内容 205: 请求成功，重置内容 206: 请求成功，返回部分内容 301: 永久性重定…...

编程日记 2023/3/30 8:41:35

【Linux】初见“which命令”，“find命令”以及linux执行命令优先级

文章目录1.which命令1.1 whereis命令1.2 locate命令1.3 搜索文件命令总结2.find命令2.1 find之exec用法2.2 管道符之xargs用法3 Linux常用命令4.命令执行优先级1.which命令 查找命令文件存放目录 搜索范围由环境变量PATH决定（echo $PATH) which命令格式&#xff1…...

编程日记 2023/3/30 8:36:34

update case when 多字段，多条件， mysql中case when用法

文章目录 前言 sql示例 普通写法： update case when写法 update case when 多字段写法 case when语法 case when 的坑 1、不符合case when条件但是字段被更新为null了 解决方法一：添加where条件 解决方法二：添加else 原样输出 2、同一条数据符…...

编程日记 2023/3/30 8:31:33

mysql隐式转换 “undefined“字符串匹配到mysql int类型0值字段

描述：mysql 用字符串搜索 能搜到int类型查询结果 mysql int类型条件用字符串查询 table: CREATE TABLE all_participate_records (id bigint unsigned NOT NULL AUTO_INCREMENT,created_at datetime(3) DEFAULT NULL,updated_at datetime(3) DEFAULT NULL,deleted…...

编程日记 2023/3/30 8:26:32

Redis八股文

1.Redis是什么? Redis 是一个基于 C 语言开发的开源数据库（BSD 许可），与传统数据库不同的是 Redis 的数据是存在内存中的（内存数据库），读写速度非常快，被广泛应用于缓存方向。并且&#xff0c…...

编程日记 2023/3/30 8:21:30

InnoDB——详细解释锁的应用，一致性读，自增长与外键

一致性非锁定读 一致性的非锁定读（consistent nonlocking read）是指InnoDB存储引擎通过行多版本控制的方式读取当前执行时数据库中行的数据。 如果读取的行正在执行 行Delete或Update操作，这时读取操作不会因此去等待行上锁的释放。相反&…...

编程日记 2023/3/30 8:16:29

C++模板基础（四）

函数模板&#xff08;四&#xff09; ● 函数模板的实例化控制 – 显式实例化定义&#xff1a; template void fun(int) / template void fun(int) //header.h template<typename T> void fun(T x) {std::cout << x << std::endl; }//main.cpp #include&quo…...

编程日记 2023/3/30 8:11:28

pycharm使用记录

文章目录下载安装后续其他设置编辑器设置关于debug下载安装 直接去pycharm官网下载社区版&#xff0c;这个版本本来就是免费的&#xff0c;而且功能其实已经够了 后续其他设置 首先&#xff0c;第一次启动时&#xff0c;记得在preference->interpreter中设置python环境&a…...

编程日记 2023/3/30 8:06:26

Linux命令·kill·killall

Linux中的kill命令用来终止指定的进程&#xff08;terminate a process&#xff09;的运行&#xff0c;是Linux下进程管理的常用命令。通常&#xff0c;终止一个前台进程可以使用CtrlC键&#xff0c;但是&#xff0c;对于一个后台进程就须用kill命令来终止&#xff0c;我们就需…...

编程日记 2023/3/30 8:01:25

wordpress恢复默认/搜客

架构介绍 https://yq.aliyun.com/articles/73038?spm5176.100239.blogcont225664.61.usDaOd 开通实例 https://help.aliyun.com/document_detail/50200.html?spm5176.product35364.4.2.j854nc 实例管理 DMS: 进入实例控制台&#xff0c;点击“登陆数据库” HDB,RDS PG管理客户…...

编程日记 2025/2/5 5:50:05

怎么编辑网站后台/网络宣传方式有哪些

题面在这里&#xff01; 显然直接枚举左端点(右端点&#xff09;就OK啦。 #include<cstdio> #include<cstdlib> #include<algorithm> #include<cstring> #include<cmath> #define ll long long using namespace std; const int N1e55;int n,a[N]…...

编程日记 2025/2/5 3:18:34

交友软件/灰色行业seo大神

正则字符匹配内容说明任一字符匹配相同字符比如字符a匹配字符a\0 - \377 八进制转义字符(256个)\x00 - \xff \u0000 - \uffff Unicode字符\t制表符同 \u0009\n换行符同 \u000A\r回车符同 \u000D\f换页符同 \u000C\a报警(bell)符同 \u0007\eEscape符同 \u001B\cxx对应的控制符如…...

编程日记 2025/2/5 1:02:03

微商城网站建设策划书/网络外贸推广

喜欢编程&#xff0c;热爱分享&#xff0c;希望能结交更多志同道合的朋友&#xff0c;一起在学习Python的道路上走得更远&#xff01;python的数值类型包括常规的类型&#xff1a;整数(没有小数部分的数字)、浮点数(通俗地说&#xff0c;就是有小数部分的数字)以及其它数值类型…...

编程日记 2025/2/4 18:53:52

小企业网站制作/盘古百晋广告营销是干嘛

创建分支 提交本地更新 提交远程github更新...

编程日记 2025/2/4 13:10:43

毕设如何做网站/浏览广告赚佣金的app

在重新安装时&#xff0c;您可能会收到一条信息&#xff0c;提示在准备更新期间出现了错误。 如果您抹掉了搭载 Apple M1 芯片的 Mac&#xff0c;您可能无法通过 macOS 恢复功能重新安装 macOS。系统可能会显示信息“准备更新时出错。未能个性化软件更新。请再试一次。”请使用…...

编程日记 2025/2/4 10:45:52