当前位置： 首页 > news >正文

Stable Diffusion 系列教程 - 5 ControlNet

news 文章来源：https://blog.csdn.net/qq_42308217/article/details/135100068 2025/1/16 5:42:42

ControlNet和LORA的定位都是对大模型做微调的额外网络。作为入门SD的最后一块拼图是必须要去了解和开发的。为什么ControlNet的影响力如此的大？在它之前，基于扩散模型的AIGC是非常难以控制的，扩散整张图像的过程充满了随机性。这种随机性并不会影响到日常的自娱自乐，但一些真正面对具体需求的岗位则无法忍受这种抽卡式的尝试。ControlNet的核心是基于一些额外输入的信息来给扩散模型的生成提供明确的指引，整个过程分为Annotator和Diffusion。Annotator（预处理器/注释器）：从图片中提取对ControlNet有用的额外信息。Diffusion：根据这些额外信息控制扩散生成的走向，在ControlNet的指导下生成图像作品。

单个ControlNet的大小在1.4G左右，上面为五个应用最为广泛的控制模型。模型的名命规则：v11代表版本为1.1 ，p代表在生产环境下可以直接使用，sd15代表底模Stable Diffusion的版本：

模型的下载路径为：lllyasviel/ControlNet-v1-1 at main (huggingface.co) 。这里可以下载我们想用的所有模型，但是切记要把yaml文件也下载下来，其用来定义模型的配置。将成对的模型文件放在目录stable_diffusion\sd-webui-aki-v4.2-XXEY\extensions\sd-webui-controlnet\models下。注意：老版本没有yaml文件，新版本的模型有yaml文件，如果不下载就用不了这个模型。

需要注意的是： ControINet之于整个AI绘画过程，其实也就是诸多环节里面的“一环"而已。AI还是会综合参考提示词、图生图、Embeddings、LoRA等各个方面的东西来综合的实现AIGC。

相关文章：

Stable Diffusion 系列教程 - 5 ControlNet

ControlNet和LORA的定位都是对大模型做微调的额外网络。作为入门SD的最后一块拼图是必须要去了解和开发的。为什么ControlNet的影响力如此的大？在它之前，基于扩散模型的AIGC是非常难以控制的，扩散整张图像的过程充满了随机性。这种随机性并不…...

编程日记 2024/1/5 13:52:55

【导出与导入Virtualbox虚拟机和启动连接openGauss数据库】

【导出与导入Virtualbox虚拟机和启动连接openGauss数据库】 一、导出虚拟机二、导入虚拟机三、启动数据库四、使用Data Studio连接数据库 一、导出虚拟机 选择关机状态的虚拟机 -> 管理菜单 -> 导出虚拟电脑 点击完成后，需要等待一小段时间，如…...

编程日记 2024/1/5 13:51:54

“华为杯”杭州电子科技大学2023新生编程大赛---树

题目链接 Problem Description 给定一棵包含 n 个节点的带边权的树，树是一个无环的无向联通图。定义 xordist(u,v) 为节点 u 到 v 的简单路径上所有边权值的异或和。 有 q 次询问，每次给出 l r x，求 ∑rilxordist(i,x) 的值。 Input 测试…...

编程日记 2024/1/5 13:50:53

使用pnnx将Torch模型转换为ncnn

1. 引言 以往我们将Torch模型转换为ncnn模型，通常需经过Torch–>onnx，onnx–>ncnn两个过程。但经常会出现某些算子不支持的问题。 ncnn作者针对该问题，直接开发一个Torch直接转换ncnn模型的工具 (PNNX)，以下为相关介绍及使…...

编程日记 2024/1/5 13:48:51

linux卸载小皮面板phpstudy教程

千万不要直接删文件夹！ 千万不要直接删文件夹！ 千万不要直接删文件夹！ 我就是按照网上搜索的教程，直接删了，然后 系统就不停的崩溃 生成这种文件： -rw------- 1 root root 223M Dec 28 22:36…...

编程日记 2024/1/5 13:47:51

【萤火虫系列教程】1/5-Adobe Firefly 注册账号

001-Adobe Firefly 注册账号 AI时代如火如荼，Adobe也不甘落后，于今年3月份发布AI创意生成工具Firefly（中文翻译：萤火虫） Adobe Firefly简介 Adobe Firefly的官方介绍为：Firefly是Adobe产品中新的创意生成…...

编程日记 2024/1/5 13:46:49

【docker】Dockerfile 指令详解

一、Dockerfile 指令详解 Dockerfile是一个用于编写docker镜像生成过程的文件，其有特定的语法。Dockerfile的基本指令有十三个，分别是：FROM、MAINTAINER、RUN、CMD、EXPOSE、ENV、ADD、COPY、ENTRYPOINT、VOLUME、USER、WORKDIR、ONBUILD。 …...

编程日记 2024/1/5 13:41:44

内存管理机制

内存管理机制与内存映射相关。 一、C与C 之所以将C与C放在一起是因为C是C的超集； 但是C是面向过程语言，C是面向对象的语言； C与C都可以使用malloc、calloc、realloc来申请内存空间； 其中void* malloc(size_t size)是在内存的动态…...

编程日记 2024/1/5 13:39:43

Jenkins工具使用

学习目录： 1、jenkins的安装 2、junkins的常规使用 3、jenkins在接口自动化测试实践 具体内容： 1、jenkins的安装 安装包下载：推荐Index of /jenkins/war/latest/ | 清华大学开源软件镜像站 | Tsinghua Open Source Mirror，…...

编程日记 2024/1/5 13:30:35

SpringBoot从配置文件中获取属性的方法

方式一：Value 基本类型属性注入，直接在字段上添加Value("${xxx.xxx}")即可．注意这里用的是$，而不是#，Value注入的属性，一般其他属性没有关联关系。 配置文件 user:name: Manaphyage: 19sex: m…...

编程日记 2024/1/5 13:29:34

oracle物化视图

物化视图定义 视图是一个虚拟表（也可以认为是一条语句），基于它创建时指定的查询语句返回的结果集，每次访问它都会导致这个查询语句被执行一次，为了避免每次访问都执行这个查询，可以将这个查询结果集存储到…...

编程日记 2024/1/5 13:26:31

基于ssm校园线上订餐系统的设计与实现论文

摘 要 信息数据从传统到当代，是一直在变革当中，突如其来的互联网让传统的信息管理看到了革命性的曙光，因为传统信息管理从时效性，还是安全性，还是可操作性等各个方面来讲，遇到了互联网时代才发现能补上自古…...

编程日记 2024/1/5 13:25:30

鸿蒙南向开发—OpenHarmony技术编译构建框架

概述 OpenHarmony编译子系统是以GN和Ninja构建为基座，对构建和配置粒度进行部件化抽象、对内建模块进行功能增强、对业务模块进行功能扩展的系统，该系统提供以下基本功能： 以部件为最小粒度拼装产品和独立编译。支持轻量、小型、标准三种系…...

编程日记 2024/1/5 13:23:28

Android Jetpack学习系列——Navigation

写在前面 Google在2018年就推出了Jetpack组件库，但是直到今天我才给重视起来，这真的不得不说是一件让人遗憾的事。过去几年的空闲时间里，我一直在尝试做一套自己的组件库，帮助自己快速开发，虽然也听说过Jetpack&#…...

编程日记 2024/1/5 13:22:27

编程语言的新趋势

随着科技的飞速发展，IT行业经历了巨大的变革，其中编程语言作为技术生态的核心要素，其演变趋势对整个行业影响深远。从过去到现在，再到未来，编程语言的发展都呈现出明显的时代特征。本文将探讨当前IT行业的现状&#xf…...

编程日记 2024/1/5 13:20:26

C++：类和对象(2)

目录 1.strcut和class的区别 2.将成员属性设置为私有 3.对象的初始化和清理 3.1 构造函数和析构函数 3.1.1 构造函数语法 3.1.2 析构函数语法 3.1.3 检验 3.2 构造函数的分类和调用 3.3 拷贝构造函数调用 1.strcut和class的区别 struct和class的唯一区别在于默认的访问…...

编程日记 2024/1/5 13:17:21

【React系列】网络框架axios库的使用

本文来自#React系列教程：https://mp.weixin.qq.com/mp/appmsgalbum?__bizMzg5MDAzNzkwNA&actiongetalbum&album_id1566025152667107329) 一. axios库的基本使用 1.1. 网络请求的选择 目前前端中发送网络请求的方式有很多种： 选择一:传统的Aj…...

编程日记 2024/1/5 13:16:20

pygame学习(二)——绘制线条、圆、矩形等图案

导语 pygame是一个跨平台Python库(pygame news)，专门用来开发游戏。pygame主要为开发、设计2D电子游戏而生，提供图像模块（image）、声音模块（mixer）、输入/输出（鼠标、键盘、显示屏）模…...

编程日记 2024/1/5 13:14:18

TCL学习笔记(持续更新)

前言： TCL（tool common language）是一种通用工具语言，很多eda tool都支持tcl，学习了解一些tcl基本语法还是很有必要的。 1：基础概念 解释器： #!/usr/bin/tclsh 打印： puts -> p…...

编程日记 2024/1/5 13:13:17

Xpath的问题:为什么在DOM中确定存在(可见)的元素,用//表达式匹配不到（附解决办法）

今天遇到一个很有意思的问题，我的爬取的目标页面上有时会出现一个弹窗，它挡住我点击其它按钮了，我想找到它的关闭按钮，自动点击一下关闭掉，本来是很简单的事情，但偏偏出问题了，DOM中看到的html是…...

编程日记 2024/1/5 13:12:17

有没有游泳可以戴的耳机？游泳耳机入耳式好,还是骨传导好

游泳是一项既能锻炼身体又能让人放松心情的运动。我们知道，音乐能够为我们的水上时光增添更多的乐趣。那么，在众多游泳耳机中，如何选择一款既适合自己的需求又具备良好性能的产品呢？ 首先，我们要了解的是，…...

编程日记 2024/1/5 13:11:16

【绘图软件】自用安装教程

链接：https://pan.baidu.com/s/17r9Pr460FzkULU7fTr91_w?pwdftv7 提取码：ftv7 --来自百度网盘超级会员V6的分享解压并且右键打开set up 解压crack软件前需要退出杀毒软件， 关闭实时保护 域网络关闭，专用网络关闭&#xff0…...

编程日记 2024/1/5 13:07:12

AIGC时代-GPT-4和DALL·E 3的结合

在当今这个快速发展的数字时代，人工智能（AI）已经成为了我们生活中不可或缺的一部分。从简单的自动化任务到复杂的决策制定，AI的应用范围日益扩大。而在这个广阔的领域中，有两个特别引人注目的名字：GPT-4和D…...

编程日记 2024/1/5 13:05:11

springBoot集成RabbitMQ实现(直连模式\路由模式\广播模式\主题模式)的消息发送和接收

该项目介绍了springboot如何集成rabbitMQ消息中间件，实现(直连模式\路由模式\广播模式\主题模式)的消息发送和接收 pom依赖 <dependency><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter</artifactId...

编程日记 2024/1/5 13:01:08

Attention机制

目录 提出背景 Attention原理 Attention机制本质思想 Attention机制总结 改进&#xff1a;Self-Attention 前置知识&#xff1a;RNN&#xff0c;LSTM/GRU 提出背景 Attention模型是基于Encoder-Decoder框架提出的。Encoder-Decoder框架&#xff0c;也就是编码-解码框架&…...

编程日记 2024/1/5 13:00:07

Rust 常用的第三方库

Rust 的标准库虽然已经很强大&#xff0c;但如果恰当地使用第三方库&#xff0c;可以大大改善编程效率。以下是一些常用的 Rust 第三方库。 tokio ---- 最通用的异步编程库&#xff0c;几乎可以说是行业标准了&#xff0c;大量的其它库依赖于tokio。reqwest ---- HTTP 客户端库…...

编程日记 2024/1/5 12:59:06

构建高可用性Java应用：介绍分布式系统设计与开发

构建高可用性Java应用需要考虑许多因素&#xff0c;其中之一是设计和开发分布式系统。分布式系统是由多个独立计算机或节点组成的系统&#xff0c;这些节点通过网络连接&#xff0c;共同完成一项任务。 在分布式系统设计和开发中&#xff0c;有几个关键方面需要考虑&#xff1…...

编程日记 2024/1/5 12:58:05

x-cmd pkg | gitui - git 终端交互式命令行工具

目录 简介首次用户功能特点类似工具与竞品进一步探索 简介 gitui 由 Stephan D 于 2020 年使用 Rust 语言构建的 git 终端交互式命令行工具&#xff0c;旨在终端界面中便捷管理 git 存储库。 首次用户 使用 x gitui 即可自动下载并使用 在终端运行 eval "$(curl https:/…...

编程日记 2024/1/5 12:55:02

javaWeb案例知识点

一.rest风格编程 二.综合案例结构 三.分页查询 分页插件PageHelper 四.部门管理开发 五.员工管理开发 六.文件上传...

编程日记 2024/1/5 12:54:01

SQL日期列更新操作详解

在实际的数据库管理过程中&#xff0c;有时我们需要对数据库中的日期列进行更新。这篇博客将详细介绍一条 SQL 语句&#xff0c;该语句用于更新 referral_up_order 表中的多个日期列&#xff0c;并将它们的日期部分更改为 2023-10-24&#xff0c;同时保留原始时间部分。 1、背…...

编程日记 2024/1/5 12:51:59

工作压力大每时每刻都想辞职怎么办/医疗网站优化公司

TextInput控件后面根了一个搜索按钮&#xff0c;当TextInput中输入内容后&#xff0c;点击搜索获取内容&#xff0c;并触发搜索&#xff0c; Bug : 不能触发回调解决&#xff1a; keyboardShouldPersistTaps{always}keyboardShouldPersistTaps enum(always, never, handled, fa…...

编程日记 2025/1/16 5:27:28

网站制作 需要什么网络技术/网站首页制作网站

引&#xff1a;http://www.javaeye.com/topic/283668 近期taowen同学连续发起了两起关于贫血模型和领域模型的讨论&#xff0c;引起了大家的广泛热烈的讨论&#xff0c;可是讨论(或者说是争论)的结果究竟如何&#xff0c;我想值得商榷。问题是大家对贫血模型和领域模型都有自己…...

编程日记 2025/1/16 4:06:14

大型网站开发语言框架工具/软文营销经典案例优秀软文

一&#xff1a;Spring相关API 笔记二程序源码下载 applicationContext&#xff1a;接口类型&#xff0c;代表应用上下文&#xff0c;可以通过其实例获得 Spring 容器中的 Bean 对象 ApplicationContext的实现类 1&#xff09;ClassPathXmlApplicationContext ​ 它是从类的…...

编程日记 2025/1/16 3:53:04

网站手机端排名怎么做/个人网站制作

文章目录前言一、依赖关系是什么&#xff1f;二、支持的功能总结前言 终于更新一个小的python项目来一起动手学习了&#xff0c;今天想看看Redis源码&#xff0c;可惜太慢太多&#xff0c;思维太乱&#xff0c;于是想到看是否用Python可以分析出这个源码直接的依赖关系。 一、…...

编程日记 2025/1/16 3:33:49

网站制作厂家/网站的推广方法

1清楚一个项目的工作量有多少。 2了解一个项目中每一个组成部分的工作难度是怎么样的。 3对项目中每一个组成部分需要多少时间来完成心中要有数。 4熟悉同伴们的工作特点和强项所在&#xff0c;有针对性的分派任务。 5一定要分工明确&#xff0c;让每一个人清楚知道自己要完…...

编程日记 2025/1/16 3:09:30

做网站的框架/如何宣传推广

首先&#xff0c;我们要明白短信发送是什么原理&#xff0c;其实我们使用的第三方是一个通讯的短信协议&#xff0c;然后把我们随机生成的一个验证码发送到用户的手机上&#xff0c;之后我们发送的同时在数据库里面要保存相应的信息用来验证&#xff0c;原理就是这样的了&#…...

编程日记 2025/1/16 0:41:41