AI大模型教程
一起来学习

Stable Diffusion LoRA精讲!小白必会的小模型使用技巧

引言:
想要让Stable Diffusion生成更符合需求的图片?LoRA(小模型)是你的秘密武器!本节课,林姨将带你深入解析LoRA的定义、下载、安装与使用方法,让你轻松掌握高效创作的核心技巧!🚀


一、LoRA是什么?

LoRA(Low-Rank Adaptation)是一种轻量级微调技术,用于在不重新训练大模型的情况下,让其学会新的风格或概念。简单来说,LoRA就像给AI画师装上了一个瞄准镜,使其能够更精准地生成特定风格的图片。


二、LoRA的下载方式

  1. C站下载

    • 访问Civitai网站,筛选LoRA模型,选择喜欢的模型下载。

  2. 启动器下载

    • 在Stable Diffusion启动器的模型管理中,选择LoRA模型进行下载,启动器会自动完成安装。

      有需要stable diffusion整合包以及提示词插件,可以扫描下方,免费获取


三、LoRA的安装地址

  • 如果通过启动器下载,LoRA会自动安装到正确位置。

  • 如果从C站或网盘下载,将文件复制到Stable Diffusion根目录的models/Lora文件夹中。


四、LoRA的使用方法

  1. 阅读作者信息

    • 了解LoRA模型对应的大模型,这是确保效果的关键。
  2. 打开附加网络界面

    • 在Stable Diffusion界面中,找到LoRA标签,选择需要的模型并调用。

  3. 使用触发词

    • 有些LoRA需要特定的提示词才能起作用,确保在提示词中加入触发词。(盲盒触发词为加粗部分:a boy.lora:blindbox_v1_mix:1,full body,chibi,)

  4. 参考作者参数生成

    • 根据作者提供的参数(如采样器、CFG值、权重等)进行设置,以复刻类似效果。
  5. 调整权重

    • 权重值越大,LoRA对画面的影响越大;权重为负时,可以减少LoRA的影响。


五、实操案例:使用LoRA生成特定风格图片

  1. 选择LoRA模型:根据需求选择合适的LoRA模型,如“盲盒风格”。

    正向提示词:masterpiece,best quality,a boy.,lora:blindbox_v1_mix:0.5,full body,chibi,

    反向提示词:lowres,bad anatomy,bad hands,text,error,missing fingers,extra digit,fewer digits,cropped,worst quality,low quality,normal quality,jpeg artifacts,signature,watermark,username,blurry,

  2. 设置参数

    • 在提示词中加入触发词(如)。

    • 调整权重值(建议0.4-0.8之间)。

  3. 生成图片:设置参数为1.3点击生成,观察LoRA对画面的影响。

    4. 现代建筑无lora案例:Grand panorama,parallel viewing angle,modern architecture,science fiction,

5. 现代建筑加lora案例:

masterpiece,best quality,Grand panorama,parallel viewing angle,modern architecture,science fiction,

lora:JJsCurvyArchitecture:0.8,lora:fantasy_20230707233406:0.4,

6. 宫崎骏风格治愈系风景:hayao miyazaki,healing landscape.

7. 宫崎骏风格治愈系风景+吉卜力lora:hayao miyazaki,healing landscape,lora:Dark_Ghibli:1.2,, 调整不同的参考系数,就能得到下面的风景图,你喜欢哪张呢?如果都不满意,可以找找其他的大模型和lora,做出让自己满意的图片。


六、常见问题解答

  1. LoRA效果不明显?

    • 检查是否正确调用了触发词,或尝试调整权重值。
  2. 多个LoRA混用效果差?

    • 新手建议先从单个LoRA开始,避免混用导致效果混乱。

结语:LoRA让创作更灵活!

通过本节课的学习,你已掌握LoRA的基本使用方法。现在就用这些知识优化你的生成效果,探索更多创意吧!🎨

这里直接将该软件分享出来给大家吧~

1.stable diffusion安装包

随着技术的迭代,目前 Stable Diffusion 已经能够生成非常艺术化的图片了,完全有赶超人类的架势,已经有不少工作被这类服务替代,比如制作一个 logo 图片,画一张虚拟老婆照片,画质堪比相机。

最新 Stable Diffusion 除了有win多个版本,就算说底端的显卡也能玩了哦!此外还带来了Mac版本,仅支持macOS 12.3或更高版本

2.stable diffusion视频合集

我们在学习的时候,往往书籍源码难以理解,阅读困难,这时候视频教程教程是就很适合了,生动形象加上案例实战,一步步带你入坑stable diffusion,科学有趣才能更方便的学习下去。

3.stable diffusion模型下载

stable diffusion往往一开始使用时图片等无法达到理想的生成效果,这时则需要通过使用大量训练数据,调整模型的超参数(如学习率、训练轮数、模型大小等),可以使得模型更好地适应数据集,并生成更加真实、准确、高质量的图像。

4.stable diffusion提示词

提示词是构建由文本到图像模型解释和理解的单词的过程。可以把它理解为你告诉 AI 模型要画什么而需要说的语言,整个SD学习过程中都离不开这本提示词手册。

5.SD从0到落地实战演练

如果你能在15天内完成所有的任务,那你堪称天才。然而,如果你能完成 60-70% 的内容,你就已经开始具备成为一名SD大神的正确特征了。

这份完整版的stable diffusion资料我已经打包好,需要的点击下方插件,即可前往免费领取!

文章来源于互联网:Stable Diffusion LoRA精讲!小白必会的小模型使用技巧

相关推荐: 一口气摸透AIGC文生图产品SD(Stable Diffusion)!

hihi,朋友们,时隔半年(24年11月),终于能腾出时间唠一唠SD了🤣,真怕再不唠一唠,就轮不到SD了,技术更新换代是在是太快! 朋友们,最近(24年2月)是真的没时间整理笔记,每天都在疯狂的学习Stable Diffusion和WebUI & Co…

赞(0)
未经允许不得转载:5bei.cn大模型教程网 » Stable Diffusion LoRA精讲!小白必会的小模型使用技巧
分享到: 更多 (0)

AI大模型,我们的未来

小欢软考联系我们