当前位置： 首页 > news >正文

机器学习-无监督算法之降维

news 文章来源：https://blog.csdn.net/qq_61735602/article/details/133817927 2025/1/1 7:43:23
  • 降维：将训练数据中的样本从高维空间转换到低维空间，降维是对原始数据线性变换实现的。
  • 为什么要降维？高维计算难，泛化能力差，防止维数灾难
  • 优点：减少冗余特征，方便数据可视化，减少内存。
  • 缺点：可能丢失数据，需要确定保留多少主成分

奇异值分解

  • 把一个矩阵拆成三个，对角矩阵起到拉伸作用，正交矩阵起到旋转作用。
  • A = UΣVT：U和V为正交矩阵，Σ为对角矩阵
Created with Raphaël 2.3.0 开始 M = UΣV^T 求M^TM的特征向量得到V 求MM^T的特征向量得到U 求M^TM或MM^T的特征值，然后开放得到奇异值 构成对角矩阵Σ
  • 应用：节省存储空间，降维，图片压缩

主成分分析

  1. PCA识别在训练集中占方差最大的轴
  2. 步骤
  • Z值化
  • 计算协方差矩阵，它的特征向量就是主成分
    • 利用SVD求特征向量
    • 基于特征值求特征向量
  1. 对角矩阵代表方差，其余代表相关性
  2. 缺点：分类问题效果不好

t-SNE

  1. 归一化
  2. 计算在二维空间中数据的相似度
  3. 将二维随机映射到一维，然后按照高纬度和低纬度相似度的差异，设计损失函数，用梯度下降来优化

在这里插入图片描述
常见降维算法

相关文章：

机器学习-无监督算法之降维

降维：将训练数据中的样本从高维空间转换到低维空间，降维是对原始数据线性变换实现的。为什么要降维？高维计算难，泛化能力差，防止维数灾难优点：减少冗余特征，方便数据可视化，减少内存…...

编程日记 2023/10/17 21:43:06

ubuntu20.04下Kafka安装部署及基础使用

Ubuntu安装kafka基础使用 kafka 安装环境基础安装下载kafka解压文件修改配置文件启动kafka创建主题查看主题发送消息接收消息 工具测试kafka Assistant 工具连接测试基础连接连接成功查看topic查看消息查看分区查看消费组 Idea 工具测试基础信息配置信息当前消费组发送消息消费…...

编程日记 2023/10/17 21:42:05

汉得欧洲x甄知科技 | 携手共拓全球化布局，助力出海中企数智化发展

HAND Europe 荣幸获得华为云颁发的 GrowCloud 合作伙伴奖项，进一步巩固了其在企业数字化领域的重要地位。于 2023 年 10 月 5 日，HAND Europe 参加了华为云荷比卢峰会，并因其在全球拓展方面的杰出贡献而荣获 GrowCloud 合作伙伴奖项的认可。 …...

编程日记 2023/10/17 21:41:05

【Javascript保姆级教程】显示类型转换和隐式类型转换

文章目录 前言一、显式类型转换1.1 字符串转换1.2 数字转换1.3 布尔值转换 二、隐式类型转换2.1 数字与字符串相加2.2 布尔值与数字相乘 总结 前言 JavaScript是一种灵活的动态类型语言，这意味着变量的数据类型可以在运行时自动转换，或者通过显式类型转…...

编程日记 2023/10/17 21:40:04

C++算法前缀和的应用：分割数组的最大值的原理、源码及测试用例

分割数组的最大值 相关知识点 C算法：前缀和、前缀乘积、前缀异或的原理、源码及测试用例：付视频课程 二分 过些天整理基础知识 题目 给定一个非负整数数组 nums 和一个整数 m ，你需要将这个数组分成 m 个非空的连续子数组。 设计一个算法…...

编程日记 2023/10/17 21:39:02

gitlab自编译 源码下载

网上都是怎么用 gitlab，但是实际开发中有需要针对 gitlab 进行二次编译自定义实现功能的想法。 搜索了网上的资料以及在官网的查找，查到了如下 gitlab 使用 ruby 开发。 gitlab 下载包 gitlab/gitlab-ce - Packages packages.gitlab.com gitlab/gitl…...

编程日记 2023/10/17 21:38:01

SBD（Schottky Barrier Diode）与JBS（Junction Barrier Schottky）

SBD和JBS二极管都是功率二极管，具有单向导电性，在电路中主要用于整流、箝位、续流等应用。两者的主要区别在于结构和性能。 结构 SBD是肖特基二极管的简称，其结构由一个金属和一个半导体形成的金属-半导体结构成。 JBS是结势垒肖特基二极…...

编程日记 2023/10/17 21:37:00

HANA:计算视图-图形化Aggregation组件-踩坑小记（注意事项）

今天遇到在做HANA视图开发的时候，遇到一个事，一直以为是个BUG，可把我气坏了，具体逻辑是这样的，是勇图形化处理的，ACDOCA innerjoin 一个时间维度表，就这么简单，完全按照ACDOCA的主键…...

编程日记 2023/10/17 21:35:59

【milkv】更新rndis驱动

问题 由于windows升级到了11，导致rndis驱动无法识别到。 解决 打开设备管理器，查看网络适配器，没有更新会显示黄色的图标。 右击选择更新驱动...

编程日记 2023/10/17 21:34:58

基于混沌博弈优化的BP神经网络（分类应用） - 附代码

基于混沌博弈优化的BP神经网络（分类应用） - 附代码 文章目录 基于混沌博弈优化的BP神经网络（分类应用） - 附代码1.鸢尾花iris数据介绍2.数据集整理3.混沌博弈优化BP神经网络3.1 BP神经网络参数设置3.2 混沌博弈算法应用 4.测试结果…...

编程日记 2023/10/17 21:33:58

基于人工水母优化的BP神经网络（分类应用） - 附代码

基于人工水母优化的BP神经网络（分类应用） - 附代码 文章目录 基于人工水母优化的BP神经网络（分类应用） - 附代码1.鸢尾花iris数据介绍2.数据集整理3.人工水母优化BP神经网络3.1 BP神经网络参数设置3.2 人工水母算法应用 4.测试结果…...

编程日记 2023/10/17 21:32:57

【C++】哈希学习

哈希学习 unordered系列关联式容器哈希结构除留余数法哈希冲突闭散列线性探测二次探测 负载因子开散列开散列增容 闭散列 VS 开散列字符串哈希算法 线性探测 & 二次探测实现拉链法实现 unordered系列关联式容器 unordered系列关联式容器是从C11开始，STL提供的。…...

编程日记 2023/10/17 21:31:56

Nginx的安装——window环境

1、下载Nginx 在官网下载稳定版本： http://nginx.org/en/download.html 以nginx/Windows-1.24.0为例，直接下载 nginx-1.24.0.zip。 下载后解压，解压后如下： 2、启动nginx 在window环境下启动nginx的方法有以下两种： …...

编程日记 2023/10/17 21:30:55

C语言笔记之指针

一.指针含义 1.a、*a与&a的区别 a存储指向变量的地址,*a为指针的值,&a为指针的地址 #include <stdio.h>int main(){/** 测试代码部分一 **/int a12;int *b1;b1&a1;printf(" a1 %d, &a1 %d, b1 %d, *b1 %d, &b1 %d\n\n",a1,&a1…...

编程日记 2023/10/17 21:28:53

【 OpenGauss源码学习 —— 列存储（CU）（二）】

列存储&#xff08;CU&#xff09;&#xff08;二&#xff09; 概述GetCUHeaderSize 函数Compress 函数CU::FillCompressBufHeader 函数CU::CompressNullBitmapIfNeed 函数CU::CompressData 函数 声明&#xff1a;本文的部分内容参考了他人的文章。在编写过程中&#xff0c;我们…...

编程日记 2023/10/17 21:27:52

Java并发面试题：（四）synchronized和lock区别

synchronized 关键字 synchronized关键字解决的是多个线程之间访问资源的同步性&#xff0c;synchronized关键字可以保证被它 修饰的方法或者代码块在任意时刻只能有一个线程执行。 另外&#xff0c;在 Java 早期版本中&#xff0c; synchronized属于重量级锁&#xff0c;效率…...

编程日记 2023/10/17 21:26:51

使用Nginx实现采集端和数据分析平台的数据加密传输

1. 需求描述 目前鸿鹄暴露出来的重要ports如下表&#xff1a; 在实际的生产环境中&#xff0c;结合我司的使用场景&#xff0c;需要在鸿鹄前端安装proxy&#xff0c;用以解决如下两个问题&#xff1a; 1.1 实现http到https的强制跳转 企业环境中&#xff0c;一般会关闭http 80端…...

编程日记 2023/10/17 21:25:51

appium---如何判断原生页面和H5页面

目前app中存在越来越多的H5页面了&#xff0c;对于一些做app自动化的测试来说&#xff0c;要求也越来越高&#xff0c;自动化不仅仅要支持原生页面&#xff0c;也要可以H5中进行操作自动化&#xff0c; webview是什么 webview是属于android中的一个控件&#xff0c;也相当于一…...

编程日记 2023/10/17 21:24:48

【WIFI】【WPS】如何从log角度判断WPS 已经连接上

在Android项目中，由于WPS在Framework 接口中已经remove了 只能通过wpa-supplicant 代码中去判断是否连接上了 这段代码log 表示 PBC模式下没有激活 09-21 22:42:16.221503 3782 3782 D wpa_supplicant: wlan0: 0: 04:cf:4b:21:a0:3e ssid=Openwrt-WPS-tp wpa_ie_len=0 rsn…...

编程日记 2023/10/17 21:23:46

[正式学习java①]——java项目结构，定义类和创建对象，一个标准javabean的书写

目录 一、创建第一个java文件 二、 初始类和对象 三、符合javabean规范的类 一、创建第一个java文件 要想写代码&#xff0c;你得有文件啊 以前的创建方式&#xff1a; 右键新建文本文档&#xff0c;开始写代码&#xff0c;写完改后缀名&#xff0c;保存……这样文件一旦多了…...

编程日记 2023/10/17 21:20:41

day36

今日内容概要 进程基础(操作系统中的概念) 进程调度算法(四种算法) 进程的并行和并发的概念 同步异步阻塞非阻塞的概念 创建进程(进程类Process) Process类的参数 Process类的方法 如何开启多进程 基于TCP协议的高并发程序 进程基础 进程它是操作系统中最重要的概念…...

编程日记 2023/10/17 21:19:40

五. 激光雷达建图和定位方案-开源SLAM

前面内容&#xff1a; 一. 器件选型心得&#xff08;系统设计&#xff09;--1_goldqiu的博客-CSDN博客 一. 器件选型心得&#xff08;系统设计&#xff09;--2_goldqiu的博客-CSDN博客 二. 多传感器时间同步方案&#xff08;时序闭环&#xff09;--1 三. 多传感器标定方案&a…...

编程日记 2023/10/17 21:18:40

SAP MM学习笔记37 - 请求书照合中的 追加请求/追加Credit 等概念/ 请求书的取消

有关请求书照合&#xff0c;之前学习了一部分&#xff0c;现在再来学其中的一些概念。 其实这些概念也许并不常用&#xff0c;但是你又不能不知道&#xff0c;因为客户会问。 有关请求书&#xff0c;贴一些以前学习的文章&#xff0c;以方便阅读。 SAP MM学习笔记33 - 请求书…...

编程日记 2023/10/17 21:16:38

【C#】Winform实现轮播图

复制后&#xff0c;需要修改的代码&#xff1a; 1、图片文件夹路劲&#xff1a;string folderPath "C:\\Users\\Administrator\\Desktop\\images"; 2、项目命名空间&#xff1a;namespace BuildAction 全窗口代码&#xff1a; using System; using System.Colle…...

编程日记 2023/10/17 21:15:37

MyBatisPlus（十九）自动填充

说明 自动填充指的是&#xff0c;当数据被 插入 或者 更新 的时候&#xff0c;会为指定字段进行一些默认的数据填充。 比如&#xff0c;插入时&#xff0c;会自动填充数据的创建时间和更新时间&#xff1b;更新时&#xff0c;会自动填充数据的更新时间。 实现方式 配置处理器…...

编程日记 2023/10/17 21:14:36

设计模式_命令模式

命令模式 介绍 定义案例问题堆积在哪里解决办法 行为形设计模式 就是把 “发布命令 执行命令”细化为多个角色 每个角色又能继续细化 发布命令 1 打印1-9 a 打印A-G 如果有更多的命令 命令处理方式更加多样性 更复杂 处理命令的顺序拆分角色&#xff1a;降低耦合度 命令类&am…...

编程日记 2023/10/17 21:13:35

python接口自动化测试(六)-unittest-单个用例管理

前面五节主要介绍了环境搭建和requests库的使用&#xff0c;可以使用这些进行接口请求的发送。但是如何管理接口案例&#xff1f;返回结果如何自动校验&#xff1f;这些内容光靠上面五节是不行的&#xff0c;因此从本节开始我们引入python单元测试框架 unittest&#xff0c;用它…...

编程日记 2023/10/17 21:12:34

tomcat 服务器

tomcat 服务器 tomcat: 是一个开源的web应用服务器。区别nginx&#xff0c;nginx主要处理静态页面&#xff0c;那么动态请求&#xff08;连接数据库&#xff0c;动态页面&#xff09;并不是nginx的长处&#xff0c;动态的请求会交给tomcat进行处理。 nginx-----转发动态请求-…...

编程日记 2023/10/17 21:11:33

如果你有一次自驾游的机会，你会如何准备？

常常想来一次说走就走的自驾游&#xff0c;但是光是想想就觉得麻烦的事情好多&#xff1a;漫长的公路缺少娱乐方式、偏僻拗口的景点地名难以导航、不熟悉的城市和道路容易违章…… 也因为如此&#xff0c;让我发现了HUAWEI HiCar这个驾驶人的宝藏&#xff01; 用HUAWEI HiCar…...

编程日记 2023/10/17 21:10:32

关于ts的keyof

type props_type {name: string,age: number }const props: props_type {name: tjq,age: 18 }for (const key in props) { //props[key]出现红色波浪线const value props[key]; }why&#xff1f; 经过我查阅多方资料&#xff0c;在网上看到一个比较合适的例子 地址&#xf…...

编程日记 2023/10/17 21:08:30

网站备案表格下载/什么是seo优化

--实测只有主表动宽表动&#xff0c;从表动主表不动宽表不动 CREATE MATERIALIZED VIEW dws_iot.realtime_device engine CollapsingMergeTree(sign) PARTITION BY toYYYYMM(created_date) order by id POPULATE AS SELECTdv.id AS id,dv.sign AS sign,dv.created_date AS cr…...

编程日记 2025/1/1 6:41:03

3d网页游戏排行榜前十名/长春关键词优化报价

标准库类型vector表示对象的集合&#xff0c;其中所有对象的类型都相同。集合中的每个对象都有一个与之对应的索引&#xff0c;索引用于访问对象。因为vector“容纳着”其他对象&#xff0c;所以它被称为容器。 要想使用vector&#xff0c;必须包含适当的头文件。#include<v…...

编程日记 2025/1/1 2:23:49

广告设计公司广告宣传单设计/网站推广和精准seo

上篇文章我们介绍了如何利用DataSet 和 DataAdaper对象来对单张表进行操作。 本文我们将介绍如何进行跨表操作。 我们通过具体例子方式进行演示&#xff0c;例子涉及到三张表。 1&#xff09;student表&#xff08;学生信息表&#xff09;&#xff0c;有 studentno和studentnam…...

编程日记 2024/12/31 19:44:58

网站建设费用 业务宣传费/购买域名的网站

描述 小明和小红在打赌说自己数学学的好&#xff0c;于是小花就给他们出题了&#xff0c;考考他们谁NB&#xff0c;题目是这样的给你N个数在这n个数之间添加N-1个*或&#xff0c;使结果最大&#xff0c;但不可以打乱原顺序&#xff0c;请得出这个结果如1 3 5结果是&#xff08;…...

编程日记 2024/12/31 18:05:06

佛山网站设计的外文名是/优化设计四年级上册语文答案

Mysql自定义监控需求&#xff1a;公司需要做mysql的数据监控&#xff0c;对mysql的状态&#xff0c;流量进行监控。分析&#xff1a;zabbix自动就有Template App MySQL模版&#xff0c;我们只要添加mysql监控脚本就可以实现自定义监控。配置如下&#xff1a;zabbix的服务端搭建…...

编程日记 2024/12/31 16:15:42

网建类公司/网站优化排名易下拉霸屏

将项目中的对象和对象之间的管理&#xff0c;纳入spring容器&#xff0c;由spring管理 1 实现springhibernate集成 1.1 新建web项目 建立项目的包结构&#xff08;package&#xff09; 1.2加入jar包 1.3 建立pojo类 1 package org.guangsoft.pojo;2 /***3 * 定部门的pojo类4 …...

编程日记 2024/12/31 15:59:33