当前位置： 首页 > news >正文

【李宏毅】深度学习6：机器学习任务攻略

news 文章来源：https://blog.csdn.net/u014128608/article/details/132708613 2024/12/1 0:37:24
  1. 如果在测试集上的效果不佳，应该要做什么？
  2. Optimization 如何选择？
  3. 解决 overfitting 的方法？

测试集上的效果不佳

  1. 看训练数据的loss，是不是模型本身就没训练好？
    • 问题：model 太简单了，func set 中没有满足条件的 func (我觉得这就是一种欠拟合的状态吧)
    • 解决方案：使用更复杂的模型
  2. 优化法 Optimization 没有选对，比如通过梯度下降，结果收敛到局部最优。
  • 如何确定是 model 不够复杂还是优化法没有选对呢？可以先选择更复杂的模型，看有没有提升。假设换了更复杂的模型，还是没有学好的话，表明是 Optimization 的问题。

备注：如果训练层数变多，在训练集上的 loss 先减小后增大，这是的过拟合问题吗？（不是，因为过拟合是相对测试集来讲的，所以不是过拟合 overfitting
在这里插入图片描述

overfitting 的解决方案

在这里插入图片描述

mismatch

mismatch 是说训练和测试数据分布不一致带来的。不能靠增加训练数据来解决
在这里插入图片描述

相关文章：

【李宏毅】深度学习6：机器学习任务攻略

如果在测试集上的效果不佳，应该要做什么？Optimization 如何选择？解决 overfitting 的方法？ 测试集上的效果不佳 看训练数据的loss，是不是模型本身就没训练好？ 问题：model 太简单了&#xff0c…...

编程日记 2023/9/10 5:19:45

如何使用SQL SERVER的OpenQuery

如何使用SQL SERVER的OpenQuery 一、OpenQuery使用说明二、 OpenQuery语法2.1 参数说明2.2注解 三、示例3.1 执行 SELECT 传递查询3.2 执行 UPDATE 传递查询3.3 执行 INSERT传递查询3.4 执行 DELETE 传递查询 一、OpenQuery使用说明 在指定的链接服务器上执行指定的传递查询。 …...

编程日记 2023/9/10 5:18:44

element-tree树结构-默认选中第一个节点高亮-根据id选中节点高亮

前言 tree树结构是在开发中经常使用的组件，比如区域树，楼层树，组织架构树，等等包含节点关系 实际开发可能需要我们一进到页面选中树形结构第一个节点，并且调用数据，来达到用户体验 在用户选择之后&#x…...

编程日记 2023/9/10 5:17:42

Python实操 PDF自动识别并提取Excel文件

最近几天，paddleOCR开发了新的功能，通过将图片中的表格提取出来，效果还不错，今天，作者按照步骤测试了一波。 首先，讲下这个工具是干什么用的：它的功能主要是针对一张完整的PDF图片，可…...

编程日记 2023/9/10 5:16:41

JVM监控和调优常用命令jps|jstat|jinfo|jmap|jhat|jstack实战

1.JVM监控和调优的主要目的 性能优化：通过JVM调优，可以提高Java应用程序的性能，减少响应时间，提高吞吐量，以更好地满足用户需求。性能优化可以加快应用程序的执行速度，减少延迟，提高用户体验。 内存管理：JVM负责管理Java应用程序的内存。正确的内存管理可以避免内存泄漏…...

编程日记 2023/9/10 5:15:40

chatglm2-6b在P40上做LORA微调 | 京东云技术团队

背景： 目前，大模型的技术应用已经遍地开花。最快的应用方式无非是利用自有垂直领域的数据进行模型微调。chatglm2-6b在国内开源的大模型上，效果比较突出。本文章分享的内容是用chatglm2-6b模型在集团EA的P40机器上进行垂直领域的LORA微调。 …...

编程日记 2023/9/10 5:14:39

WebGL 同时使用多幅纹理

目录 前言 ​编辑 示例代码 颜色矢量的分量乘法来计算两个纹素最终的片元颜色 注册事件响应函数：loadTexture（），最后一个参数是纹理单元编号。 请求浏览器加载图像： 配置纹理：loadTexture&#xff0…...

编程日记 2023/9/10 5:13:36

探索云计算和大数据分析的崛起：API行业的机遇与挑战【电商大数据与电商API接入】

I. 引言 随着云计算和大数据分析技术的快速发展，企业和个人对数据分析和处理的需求不断增加。在这个信息爆炸的时代，数据已成为企业决策和战略规划的重要基础。云计算提供了强大的计算和存储能力，使得大规模数据的处理和分析变得更加容易和高…...

编程日记 2023/9/10 5:12:35

android studio通过wifi、无线连接设备

AndroidStudio无线wifi调试设备_android studio wifi_zwylovemzj的博客-CSDN博客 使用​​adbWireless​​工具，其能够让手机用无线来取代USB连接而使用ADB工具 1. 手机需要与电脑在同一局域网内 2. 把adbWireless安装到手机上，并开启，上面…...

编程日记 2023/9/10 5:11:34

kafka 3.5 主题分区ISR伸缩源码

ISR(In-sync Replicas)：保持同步的副本 OSR(Outof-sync Replicas)：不同步的副本。最开始所有的副本都在ISR中，在kafka工作的过程中，如果某个副本同步速度慢于replica.lag.time.max.ms指定的阈值，则被踢出ISR存入OSR&am…...

编程日记 2023/9/10 5:10:33

1-centOS7搭建伪分布式

前言：虚拟机快照的使用 VMware Workstation 软件可以用快照进行迅速的虚拟机状态的切换 ※. 类似于虚拟机备份， 可以使用备份进行快速恢复。 比如没安装jdk之前拍摄快照来备份 ※. 若jdk没安装好或者jdk环境变量配置的有问题， 可以用安装之…...

编程日记 2023/9/10 5:09:32

对开源自动化测试平台MeterSphere的使用感触

1：该平台可以通过接口，参数，配置的维护，然后继续接口自动化“一键测试”，功能还是挺强大的，具体的使用需要研究 MeterSphere的官网：MeterSphere - 专业测试云 2：一键测试在生产环境…...

编程日记 2023/9/10 5:08:31

Spring boot 第一个程序

新建工程 选择spring-boot版本 右键创建类TestController： 代码如下： package com.example.demo; import org.springframework.web.bind.annotation.GetMapping; import org.springframework.web.bind.annotation.RequestMapping; import org.springf…...

编程日记 2023/9/10 5:07:30

【SpringMVC】实现增删改查(附源码)

目录 引言 一、前期准备 1.1.搭建Maven环境 1.2.导入pom.xml依赖 1.3.导入配置文件 ①jdbc.properties ②generatorConfig.xml ③log4j2.xml ④spring-mybatis.xml ⑤spring-context.xml ⑥spring-mvc.xml ⑦修改web.xml文件 二、逆向生成增删改查 2.1.导入相关u…...

编程日记 2023/9/10 5:06:29

理财是什么？怎样学习理财？

大家好，我是财富智星，今天跟大家分享一下理财是什么？怎样学习理财的方法。 一、理财的基本原则 1、理财应注重投资而不是投机，要与时间为友。 让我们先考虑以下问题：什么样的回报才算是真正的高回报？假设有…...

编程日记 2023/9/10 5:05:28

华为云云耀云服务器L实例评测 | 开启OPC UA之旅

OPC Unified Architecture (OPC UA)是一种用于工业自动化的M2M协议(Machine-to-machine)，具有平台独立性，在Windows和Linux上都可以运行。随着云服务在工业现场的不断普及，OPCUA服务也开始大量部署在云端。 本文以华为云云耀云服务器L为基础…...

编程日记 2023/9/10 5:04:28

帝国CMS灵动标签如何调用$ecms_hashur[‘ehref‘]函数

我们在二次开发时，后台调用链接就需要加上帝国CMS的$ecms_hashur[ehref]函数，这是帝国CMS后台的安全函数，防止外部直接访问后台页面，直接强制访问后台链接就会提示“非法来源”。 我的站长站分享下制作自定义php页面，用帝国CMS灵动标签如何调用$ecms_hashur[ehref]函数方…...

编程日记 2023/9/10 5:03:27

ES6 拓展（下）

一、函数的拓展 1.1、默认参数 在ES5中设置默认参数： function func(words, name) {name name || "闷墩儿";console.log(words, name); } func("大家好！我是"); func("大家好！我是", "憨憨");func(…...

编程日记 2023/9/10 5:02:24

TouchGFX之自定义触发条件和操作

通过TouchGFX Designer，您可以自己定义具有触发条件和操作的交互组件。 自定义容器创建自定义触发条件：通过自定义容器的属性选项卡添加自定义触发条件 使用交互系统发送自定义触发条件： 通过自定义容器的“交互”选项卡，创建新的…...

编程日记 2023/9/10 5:01:23

Linux防火墙(iptables)

一、linux的防火墙组成 linux的防火墙由netfilter和iptables组成。用户空间的iptables制定防火墙规则，内核空间的netfilter实现防火墙功能。 netfilter（内核空间）位于Linux内核中的包过滤防火墙功能体系，称为Linux防火墙的“内核…...

编程日记 2023/9/10 5:00:20

zookeeper教程

zookeeper教程 zookeeper简介zookeeper的特点及数据模型zookeeper下载安装zookeeper客户端命令zookeeper配置文件zookeeper服务器常用命令zookeeper可视化管理工具zkuizookeeper集群环境搭建zookeeper选举机制使用Java原生api操作zookeeper使用java zkclient库操作zookeeper使用…...

编程日记 2023/9/10 4:59:19

杭州快递物流展-2024长三角快递物流供应链与技术装备展览会(杭州)

2024快递物流创新高质量发展论坛暨 2024长三角快递物流供应链与技术装备展览会(杭州) 时间：2024年4月12-14 日 地点：杭州国际博览中心 ESYE长三角快递物流展是亚洲范围内超大规模的快递物流业展示平台，由于展会的需求 及扩大市场的影响力…...

编程日记 2023/9/10 4:58:18

CSP 202203-1 未初始化警告

答题 要注意是xi和yi的范围&#xff0c;yi可以是0为常数。 #include<iostream> using namespace std;int main() {int n,k;cin>>n>>k;bool*initializenew bool[n]{false};int result0,x,y;while(k--){cin>>x>>y;if(y&&!initialize[y-1…...

编程日记 2023/9/10 4:57:16

开发指导—利用组件插值器动画实现 HarmonyOS 动效

一. 组件动画 在组件上创建和运行动画的快捷方式。具体用法请参考通用方法。 获取动画对象 通过调用 animate 方法获得 animation 对象&#xff0c;animation 对象支持动画属性、动画方法和动画事件。 <!-- xxx.hml --><div class"container"> <di…...

编程日记 2023/9/10 4:56:14

树莓派入门

目录 前言系统烧录使用官方烧录工具选择操作系统选择存储卡配置 Win32DiskImager 有屏幕树莓派开机树莓派关机无屏幕树莓派开机获取树莓派IP地址通过路由器获取共享网络方式获取给树莓派配置静态IP地址查找默认网关分盘给树莓派的IP地址修改树莓派DHCP配置文件 ssh登录 让树莓派…...

编程日记 2023/9/10 4:55:12

算法模型嵌入式 Mendix应用的开发示例

一、前言 根据埃森哲最新一项调查&#xff0c;2023年67%的企业持续加大在技术方面的投入&#xff0c;其中数据和AI应用是重中之重。AI在企业内部应用这个话题已经保持了十多年的热度&#xff0c;随着ChatGPT为代表的生成式AI技术的出现&#xff0c;这一话题迎来又一波的高潮。…...

编程日记 2023/9/10 4:54:10

如何使用Cygwin编译最新版的Redis源码，生成适用于Windows的Redis

文章目录 一、准备Cygwin环境二、下载Redis源码三、编译redis-7.2.01. 执行make命令2. 重新执行make命令3. 再次执行make命令4. 将编译后的可执行文件及依赖放到同一个文件夹5. 测试编译生成的可执行程序 四、换其他redis版本重新编译1. 编译redis-7.0.122. 编译redis-6.2.133.…...

编程日记 2023/9/10 4:53:09

Linux 修改SSH端口

如果防火墙&#xff0c;或防火墙已经开启&#xff0c;需要先开放2222端口 firewall-cmd --add-port2222/tcp --permanent --zonepublic firewall-cmd --reload编辑文件 vim /etc/ssh/sshd_config&#xff1a; #Port 22 Port 2222 # 打开注释&#xff0c;并修改为以下值 Clien…...

编程日记 2023/9/10 4:52:07

Redis经典问题：缓存穿透

&#xff08;笔记总结自《黑马点评》项目&#xff09; 一、产生原因 用户请求的数据在缓存中和数据库中都不存在&#xff0c;不断发起这样的请求&#xff0c;给数据库带来巨大压力。 常见的解决方式有缓存空对象和布隆过滤器。 二、缓存空对象 思路&#xff1a;当我们客户…...

编程日记 2023/9/10 4:51:06

DEFORMABLE DETR: DEFORMABLE TRANSFORMERS FOR END-TO-END OBJECT DETECTION (论文解析)

DEFORMABLE DETR: DEFORMABLE TRANSFORMERS FOR END-TO-END OBJECT DETECTION 摘要1 介绍2 相关工作3 重新审视 Transformers 和 DETR4 方法4.1 用于端到端目标检测的可变形transformer4.2 Deformable Detr的其他改进和变型5 实验5.1 和DETR 比较5.2 消融实验5.3 与最先进方法的…...

编程日记 2023/9/10 4:50:05

wordpress安卓版/商品推广

本期&#xff0c;微子网络将为您带来一些在Linux中监控磁盘分区的工具。文章内容丰富&#xff0c;从专业角度分析叙述。看完这篇文章&#xff0c;希望你能有所收获。什么是Linux系统 Linux是一个类似Unix的操作系统&#xff0c;可以自由使用和自由传播。它是一个基于POSIX的多用…...

编程日记 2024/11/30 20:36:55

顺义重庆网站建设/竞价推广代运营公司

笔记本使用Android studio的adb wifi插件时&#xff0c;AS 最下方报 adb wifi scan ip address。一直无法使用。 解决办法&#xff1a; ----在Terminal窗口中输入&#xff1a; adb connect 192.X.X.X (你手机的ip) 手机ip可以通过wifi信息获取。 然后会显示&#xff1a; un…...

编程日记 2024/11/30 19:02:42

做调查的网站知乎/seo专员是干嘛的

HTTP协议超级详解 原文&#xff1a;https://www.cnblogs.com/an-wen/p/11180076.html HTTP协议简介 超文本传输协议&#xff08;英文&#xff1a;HyperText Transfer Protocol&#xff0c;缩写&#xff1a;HTTP&#xff09;是一种用于分布式、协作式和超媒体信息系统的应用层…...

编程日记 2024/11/30 18:00:02

wordpress文章自动截断/谷歌seo零基础教程

pygame.pixelcopypygame模块用于通用的像素数组复制 pygame.pixelcopy.surface_to_array - 将surface像素复制到数组对象 pygame.pixelcopy.array_to_surface - 将数组对象复制到surface pygame.pixelcopy.map_array - 使用surface格式将数组复制到另一个数组 pygame.pixelcopy…...

编程日记 2024/11/30 16:32:20

宁波做网站优化/网络营销的4p策略

use mastergoAlter database tempdb modify file (name tempdev, filename G:\db\tempdb.mdf)goAlter database tempdb modify file (name templog, filename G:\db\templog.ldf) --重启数据库即可转载于:https://www.cnblogs.com/TeyGao/p/3524324.html...

编程日记 2024/11/30 15:40:49

中国第八冶金建设公司网站/网站top排行榜

更多内容请查看&#xff1a;BizTalk动手实验系列目录 BizTalk 开发系列 BizTalk 的TCP/IP适配器最初是为英国的保健行业开发。该适配器属于BizTalk进程内适配器&#xff0c;将消息通过TCP/IP 套接字符串在BizTalk服务器与远程客户端间进行通讯。 TCP/IP适配器支持以下几种交互模…...

编程日记 2024/11/30 14:18:02