【stable diffusion模型】stable-diffusion3.5正式发布，如何在本地部署和使用？附本地一键整合包！

前言

就在2024年10月22日，**Stablity公司正式推出他们的第三代stable-diffuison产品，stable-diffuison3.5，**相比于前两代的stable-diffuison产品有了巨大提升，具体包括：

• stable-diffuison3.5引入了多模态Transformer（MMDiT）新构架，这种构架结合了扩散型和Transformer技术，提升了文本理解和图像生成的质量，使得生成的图像在细节和布局上更为精确

• 第三代模型参数大幅度增加，从800万像素到80亿不等，这使得图像分辨率上限从第二代的768×768提升到2048×2048，显著改善了图像的质量和细节表现；

• 新版本在生成图像时速度更快，且在保证高质量输出的同时更加节省计算资源。这一改进对需要快速生成大量高质量图像的用户特别有用；

• 在文本生成和理解方面，Stable Diffusion 3 具备了更强的能力，可以准确地渲染图像中的文字内容，减少文字生成中的对称性问题和错误。这使得新版本在提示词的准确性和一致性方面有了显著提升；

• 第三代提供了更灵活的图像生成参数，用户可以调节风格、构图和色彩等特性。此外，支持多模态输入，允许结合文本、草图或参考图像等多种信息来生成图像；

所有的AI设计工具，安装包、模型和插件，都已经整理好了，👇获取~

下面这几组图片是通过stable-diffusion3.5生成的图片：

图1：名侦探柯蓝

图二：皮卡丘

图三：汤姆猫

图四：一个中国女孩

当然，如果你想无安装在线体验这款最新的AI绘图工具，那么你可以打开LibLibAI官网，在第一页你就可以看到最近新出的stable-diffusion3.5，按照下述方式进行操作，你就可以马上使用这款新的AI工具：

这个网页版应用程序只能免费生成有限次数的图像，超过一定数量后，就需要购买他们的套餐。不过，如果你的电脑性能足够强，比如配备了一张 NVIDIA 显卡，且显存达到 16GB 以上，那么恭喜你，可以在本地部署这个强大的 AI 绘图工具。

首先你需要获取一个最新版的comfyui一键整合包，你可以考虑到github上下载：

https://github.com/comfyanonymous/ComfyUI/releases/download/v0.2.4/ComfyUI_windows_portable_nvidia.7

不知道如何下载？可以查看下面的步骤：

在将comfyui准备就需后，下一步：获取运行stable-diffusion3.5的大模型以及对应的comfyui工作流，关于大模型的获取，可以直接考虑到stabilityAI公司提供的hugingfgace网站上：

https://huggingface.co/stabilityai/stable-diffusion-3.5-large

在打开上述网站后，首先你需要先注册并登录你的huaggingface账号，然后才能下载到模型页面下载对应的文件

如果你已经成功登录了 Huggingface 账号，并在模型页面进行下载，但感觉下载速度不够理想，你可以参考下面这篇文章的方法。首先，将所需的大模型下载到 Google 云盘，然后使用 IDM 从 Google 云盘中将模型下载到本地。

[如何快速将c站或者huggingface上的大模型下载到呢？借助google云硬盘轻松实现，赶快来试试吧！再也不怕下载大模型了！]

**或者，直接关注下面的微信公众号，**回复关键词“SD3.5”即可免费获取你所需的AI大模型。

这里分享给大家的文件主要包括两个stable-diffuison3.5类型的模型，一个是Stable Diffusion 3.5 Large、另外一个是Stable Diffusion 3.5 Large Turbo ，这两个模型的大小均为16GB，且都需要单独的Clip模型来驱动，它没有内置Clip模型，使用过程中均需要16Gb显存以上的电脑。但它们生图的速度有着明显差别，首先是Stable Diffusion 3.5 Large Turbo的生图速度会更快一些，但生图的质量稍逊于Stable Diffusion 3.5 Large。

另一个关键区别就是适用场景不同，Stable Diffusion 3.5 Large 适合需要极高图像质量的专业应用，如精确的视觉效果或复杂提示词的处理，尤其是在更高分辨率（如 1 兆像素）的情况下表现优秀。Large Turbo更适合对速度要求较高的场景，在保证图像质量的前提下，加快生成过程，是时间敏感任务或资源有限的用户的理想选择。

除了上述两个模型外，还有三个clip模型：clip_g.safetensors**、clip_l.safetensors、**t5xxl_fp8_e4m3fn.safetensors ，以及**两个comfyui工作流，**详情请见下图所示的演示：

在完成上述所有操作后，**接下来，就是将下载的模型放置到comfyui的models文件目录下，**首先就是将Stable Diffusion 3.5 Large Turbo 、Stable Diffusion 3.5 Large这两款大模型放置到如下目录内：

..ComfyUImodelscheckpoints

而然后就是Clip这三个模型这放置到models目录下的clip文件夹内：

..ComfyUImodelsclip

具体请看下图演示：

接下来，启动 ComfyUI 并加载工作流。然后，选择你刚刚配置到目标位置的大模型。在提示词输入区域中输入你想要生成的图像描述，最后点击生成即可。具体演示请参看下图：

下面我们使用comfyui进行生图创作：

1、使用sd3.5创建**《熊出没》中的“熊大”**

所用提示词：``A large, friendly cartoon bear with a muscular build and a wide,` `joyful smile, resembling Xiong Da from "Boonie Bears."` `He is standing in a colorful forest clearing,``surrounded by tall pine trees and bright flowers, with a clear blue sky above.``The bear is wearing his signature green shorts, and his expression is cheerful and welcoming.` `The sunlight creates a soft glow over the scene, highlighting the vibrant and fun nature of the character. 3D cartoon style with exaggerated shapes, smooth textures, and vivid colors to capture the playful spirit.

小红帽：

提示词：``A young girl in a bright red hooded cape,``resembling Little Red Riding Hood, standing in the middle of a mystical forest.` `She is holding a small basket filled with flowers and freshly baked bread,` `with a curious and innocent expression on her face.``The trees around her are tall and covered with thick green moss,` `and soft rays of sunlight filter through the dense canopy,` `creating a magical and slightly mysterious atmosphere.``3D cartoon style with smooth textures, exaggerated facial features,` `and vibrant colors to highlight the fairytale setting

白雪公主：

提示词：``A beautiful young girl with fair skin,``black hair, and rosy cheeks, resembling Snow White,` `standing in a lush forest clearing.` `She is wearing a classic blue and yellow dress with a red bow in her hair,``holding a delicate red apple in one hand.``Sunlight filters through the tall trees, creating a magical,``dappled light effect over the scene. The atmosphere is warm and enchanting,` `capturing the innocence and charm of a fairytale setting. 3D cartoon style with smooth textures, vivid colors, and a slightly dreamy atmosphere to enhance the fairytale magic.``   

皮卡丘：

`A cheerful 3D cartoon yellow creature with large pointy ears,` `red cheeks, and a lightning-shaped tail, resembling Pikachu,` `standing in a vibrant forest.` `He has a playful smile and is surrounded by colorful flowers and bright green trees.``The sunlight creates a warm, golden glow that highlights the soft texture of his fur.` `His eyes sparkle with excitement, and tiny electric sparks flicker from his cheeks,` `adding a sense of liveliness to the scene. The atmosphere is bright, joyful,` `and full of energy, capturing a playful and adventurous spirit. 3D cartoon style with smooth textures,` `exaggerated features, and vibrant colors to bring the character to life.` 

这里直接将该软件分享出来给大家吧~

1.stable diffusion安装包

随着技术的迭代，目前 Stable Diffusion 已经能够生成非常艺术化的图片了，完全有赶超人类的架势，已经有不少工作被这类服务替代，比如制作一个 logo 图片，画一张虚拟老婆照片，画质堪比相机。

最新 Stable Diffusion 除了有win多个版本，就算说底端的显卡也能玩了哦！此外还带来了Mac版本，仅支持macOS 12.3或更高版本。

2.stable diffusion视频合集

我们在学习的时候，往往书籍源码难以理解，阅读困难，这时候视频教程教程是就很适合了，生动形象加上案例实战，一步步带你入坑stable diffusion，科学有趣才能更方便的学习下去。

3.stable diffusion模型下载

stable diffusion往往一开始使用时图片等无法达到理想的生成效果，这时则需要通过使用大量训练数据，调整模型的超参数（如学习率、训练轮数、模型大小等），可以使得模型更好地适应数据集，并生成更加真实、准确、高质量的图像。

4.stable diffusion提示词

提示词是构建由文本到图像模型解释和理解的单词的过程。可以把它理解为你告诉 AI 模型要画什么而需要说的语言，整个SD学习过程中都离不开这本提示词手册。

5.SD从0到落地实战演练

如果你能在15天内完成所有的任务，那你堪称天才。然而，如果你能完成 60-70% 的内容，你就已经开始具备成为一名SD大神的正确特征了。

这份完整版的stable diffusion资料我已经打包好，需要的点击下方插件，即可前往免费领取！

文章来源于互联网:【stable diffusion模型】stable-diffusion3.5正式发布，如何在本地部署和使用？附本地一键整合包！

相关推荐: 【AutoencoderKL】基于stable-diffusion-v1.4的vae对图像重构

模型地址：https://huggingface.co/CompVis/stable-diffusion-v1-4/tree/main/vae 主要参考:Using-Stable-Diffusion-VAE-to-encode-satellite-images…