AI绘画工具,Stable Diffusion Lora使用攻略

今天给大家讲解Stable Diffusion的相关知识,Lora的使用

一、Lora是什么

LoRA,英文全称Low-Rank Adaptation of Large LanguageModels,直译为大语言模型的低阶适应,这是微软的研究人员为了解决大语言模型微调而开发的一项技术。

可以理解为Stable-Diffusion中的一个插件,仅需要少量的数据就可以进行训练的一种模型。在生成图片时,LoRA模型会与大模型结合使用,从而实现对输出图片结果的调整。

我们举个更容易懂的例子:大模型就像素颜的人,LoRA模型就如同进行了化妆、整容或cosplay,但内在还在大模型的底子。当然LoRA模型不仅仅限制于人物,场景、动漫、风格都有相对应的LoRA。

二、Lora对比照片
在这里插入图片描述

我们可以看到,不仅在画质,还有主体形象上都有很明显的提升,这就是Lora的一个明显作用。

三、下载Lora

要使用Lora模型,那么我们需要先下载Lora才行。

2、网站下载

主流Lora模型一般都在C站能找到,就是这个网站:

https://civitai.com/

注意:需要梯子,这个自己想办法解决,不便的扫码找我拿也行

这里汇集了国内外各式各样的Lora模型,进入网站后依次点击主菜单栏模型(Models)—>右上角的过滤(Filters)—>点击“Lora”就能显示所有Lora模型了。

当然,如果你知道一些Lora的名字,也可以直接在顶部的搜索框中输入Lora的名字,通常只要输入开通几个字符就会自动匹配上类似的Lora供你选择了。

找到你需要的Lora后,点进去就可以下载Lora了。

此外国内也有类似的模型网站:

https://www.liblib.art/

界面与C站类似,找到自己喜欢的Lora点进去下载就可以了,有些国外的模型未收录。

四、安装Lora

下载下来的Lora是有固定路径存放的,如下图:

找到SD的主文件夹下的models目录,将下载的所有模型都放在Lora目录下即可。

如果你想对Lora进行分类,也可以像上图这样新建不同类型的文件夹,将Lora放到对应文件夹即可。

五、加载Lora

Lora下载好后,我们启动SD的WebUI界面,在生成按钮下面这里有个小红书的图标,如下图:

点击这个图标,WebUI就会显示Lora的界面了

这里就可以看到我们下载并且进行分类的各个Lora了。

如果你下载了新的Lora并存放在正确路径下,点击Lora标签右边的"刷新 "就可以看到了。

六、使用Lora

我们在写好正向提示词后,点击我们需要加的Lora图标,即可将Lora应用到提示词中了,如下图:

这里我们选择了2个Lora加到提示词中,某种程度上也可以把Lora当作一组提示词的集合。

七、Lora的组成

Lora通常由前后尖括号(<>)包围,由3部分组成,每一部分由冒号(:)隔开

第一部分的lora为固定名称,表示这是一个Lora

第二部分是Lora的具体名称

第三部分则是Lora的权重,默认是1

例如:

lora:koreanDollLikeness\_v10:0.6

lora是第一部分

koreanDollLikeness_v10是第二部分

0.6则是第三部分。

Lora的权重一般设置在0~1之间,越靠近1,Lora的表现越强烈,超过1或小于0会生成意想不到的图片。

不同的Lora是可以同时使用在一段提示词里面的,例如上面的提示词里我们就使用了2个不同权重的Lora。

八、Lora插件

我们在网站上下载Lora时,要注意它是否有触发词,例如这个Lora的触发词就是:3DMM

我们在写正向提示词时就一定要带上这个触发词,否则会生成不了这个Lora风格的图片。

Q:这么多Lora,如果都有触发词,我怎么能记住呢?

A:我们可以安装一个叫C站助手的插件,帮你记住这些Lora的触发词。

那要如何安装这个插件呢?

我们先找到这个插件的地址,这里我直接贴出来

https://github.com/butaixianran/Stable-Diffusion-Webui-Civitai-Helper

点击菜单栏里的扩展(Extentions),选择从网址安装标签,复制粘贴上面的这个网址,点击安装即可。

九、C站助手插件介绍

安装好之后,重启WebUI,即可在菜单栏看到C站助手了。

点击扫描(Scan),就会自动帮你把所有从C站下载的Lora自动打上标记,同时还能下载Lora对应的封面图,帮你进一步区分。

扫描完之后的Lora,点击这里的这个图标1。

然后我们会看到每个Lora上面都会多出来4个图标

图标2:这个是替换封面,可以将当前生成的图片替换为该Lora的封面图

图标3:这个是直达这个Lora的C站网址,点击就会跳转到Lora的下载页面

图标4:这个是Lora的触发词,点击会自动添加到提示词中

图标5:这个Lora的例图完整提示词,点击会自动将例图的提示词添加到正向提示词和反向提示词中。

有了这个插件会更加方便大家管理和使用Lora。

以上就是Lora使用的全部攻略,觉得有帮助欢迎大家转发分享给更多朋友。

所有的AI绘画工具,模型和插件资源·,AI学习资料及教程都已经整理好了,文末扫码即可免费获取噢

但由于AIGC刚刚爆火,网上相关内容的文章博客五花八门、良莠不齐。要么杂乱、零散、碎片化,看着看着就衔接不上了,要么内容质量太浅,学不到干货。

这里分享给大家一份Adobe大神整理的《AIGC全家桶学习笔记》,相信大家会对AIGC有着更深入、更系统的理解。

有需要的朋友,可以长按下方二维码,免费领取!

请添加图片描述

AIGC所有方向的学习路线思维导图

这里为大家提供了总的路线图。它的用处就在于,你可以按照上面的知识点去找对应的学习资源,保证自己学得较为全面。如果下面这个学习路线能帮助大家将AI利用到自身工作上去,那么我的使命也就完成了:
在这里插入图片描述

AIGC工具库

AIGC工具库是一个利用人工智能技术来生成应用程序的代码和内容的工具集合,通过使用AIGC工具库,能更加快速,准确的辅助我们学习AIGC
在这里插入图片描述

有需要的朋友,可以点击下方卡片免费领取!

精品AIGC学习书籍手册

书籍阅读永不过时,阅读AIGC经典书籍可以帮助读者提高技术水平,开拓视野,掌握核心技术,提高解决问题的能力,同时也可以借鉴他人的经验,结合自身案例融会贯通。

在这里插入图片描述

AI绘画视频合集

我们在学习的时候,往往书籍源码难以理解,阅读困难,这时候视频教程教程是就很适合了,生动形象加上案例实战,科学有趣才能更方便的学习下去。

在这里插入图片描述

有需要的朋友,可以长按下方二维码,免费领取!

请添加图片描述

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值