AI大模型教程
一起来学习

Stable Diffusion| 基础操作 - 模型

前言

大家好,今天给大家带来Stable Diffusion基操讲解,开个新坑,

我这里使用B站秋葉大佬的本地部署包,绘世启动器。

几个常用的AI网址:

C站:https://civitai.com/models

哩布哩布:https://www.liblib.ai/

本篇大概介绍下Stable Diffusion中的几种模型,

大模型(基础模型也就是Stable Diffusion模型);

所有的AI设计工具,安装包、模型和插件,都已经整理好了,👇获取~

小模型: 嵌入式(Embeddding)模型;超网络(Hypernetwork)模型;变分自编码器(VAE)模型;LoRA模型。这几类可以理解为用来调整大模型的小模型,

大模型

什么是大模型:可以理解为绘画风格集合,SD需要大模型来规定它生成的图片风格,

大模型的文件格式有两种,一种是Ckpt,一种是Safetensors。部分Ckpt格式的模型还带有pt格式的文件

存放位置:

大模型可以在C站,哩布哩布以及启动器内下载,

https://civitai.com/

使用过滤器选择Checkpoint即是大模型,当我们需要使用下载的大模型时一定要看下作者的说明,有些大模型它是需要触发词或者其他参数。不然无法达到作者给出的效果。

在启动器主页位置可以查看下载的大模型是什么样的风格,看中哪个模型直接点下载,不需要手动存储,大模型的文件内存都比较大。

嵌入式(Embeddding)&超网络Hypernetwork模型

嵌入式模型的通俗理解是将能表现出某种特征的提示词打包成一个集合;

嵌入式它的通常格式为PT,模型内存Kb单位,嵌入到提示词中生效,

超网络不是SD直接对输入数据进行处理,而是通过学习输入的一些特征,风格参数,生成适合特定对象的权重参数,

嵌入式模型存放路径:

sd-webui-akisd-webui-aki-v4.1embeddings

超网络模型存放路径:

sd-webui-akisd-webui-aki-v4.1modelshypernetworks

在SD的生成按键下方找到显示与隐藏扩展模型,可以看到嵌入式和超网络模型的位置;

方便大家理解,我这里找了俩视频(感谢UP分享):

嵌入式模型存放路径:

超网络模型存放位置:

LoRA模型

LoRA全称:Low-Rank Adaptation 低阶适应

LoRA模型的训练速度快,简单,对显卡算力要求比较低,训练角色模型效果比较好,是炼丹师们最为常用的模型。

它的通常格式为Ckpt,Safetensors,模型大小一般十几M或者几百M左右。

详细介绍可以看这个视频:

https://www.bilibili.com/video/BV1F14y1o78b/?vd_source=17dbd04b1257e704a82a3dc9f871f432

LoRA有两种加载方式,一种是通过嵌入到提示词中加载,另一种是通过LoRA插件加载。

LoRA模型的存放路径:sd-webui-akisd-webui-aki-v4.1modelsLora

VAE模型

Vae模型,大伙可以理解为给大模增加细节和滤镜的小模型,可以用来调整画面的颜色饱和度,润色,修色。

一般情况下,大模型都会内置VAE模型,大家下载大模型的时候作者也会给到提示,要么是给到Vae推荐地址。

如果没有内置我们需要下载官方的Vae模型;

Vae模型的文件后缀:vae.pt,vae****ckpt,vae****safetensors

详细介绍

https://www.bilibili.com/video/BV1Sm4y187dx/?vd_source=17dbd04b1257e704a82a3dc9f871f432

Vae模型存放路径:sd-webui-akisd-webui-aki-v4.1modelsVAE

这里直接将该软件分享出来给大家吧~

1.stable diffusion安装包

随着技术的迭代,目前 Stable Diffusion 已经能够生成非常艺术化的图片了,完全有赶超人类的架势,已经有不少工作被这类服务替代,比如制作一个 logo 图片,画一张虚拟老婆照片,画质堪比相机。

最新 Stable Diffusion 除了有win多个版本,就算说底端的显卡也能玩了哦!此外还带来了Mac版本,仅支持macOS 12.3或更高版本

2.stable diffusion视频合集

我们在学习的时候,往往书籍源码难以理解,阅读困难,这时候视频教程教程是就很适合了,生动形象加上案例实战,一步步带你入坑stable diffusion,科学有趣才能更方便的学习下去。

3.stable diffusion模型下载

stable diffusion往往一开始使用时图片等无法达到理想的生成效果,这时则需要通过使用大量训练数据,调整模型的超参数(如学习率、训练轮数、模型大小等),可以使得模型更好地适应数据集,并生成更加真实、准确、高质量的图像。

4.stable diffusion提示词

提示词是构建由文本到图像模型解释和理解的单词的过程。可以把它理解为你告诉 AI 模型要画什么而需要说的语言,整个SD学习过程中都离不开这本提示词手册。

5.SD从0到落地实战演练

如果你能在15天内完成所有的任务,那你堪称天才。然而,如果你能完成 60-70% 的内容,你就已经开始具备成为一名SD大神的正确特征了。

这份完整版的stable diffusion资料我已经打包好,需要的点击下方插件,即可前往免费领取!

文章来源于互联网:Stable Diffusion| 基础操作 – 模型

相关推荐: Stable Diffusion【写实模型】:超级逼真的超写实摄影大模型万享XL之光影特效

今天和大家分享的是一个国产万享系列中使用量最高的大模型:万享XL_超写实摄影,顾名思义,该大模型主要是面向写实摄影,一方面生成的图片人物皮肤纹理细节超级逼真,另一方面对于光影效果的处理也非常到位。 对于万享XL超写实摄影大模型,不同的版本参数设置是不一样的,大…

赞(0)
未经允许不得转载:5bei.cn大模型教程网 » Stable Diffusion| 基础操作 - 模型
分享到: 更多 (0)

AI大模型,我们的未来

小欢软考联系我们