今天给大家讲解Stable Diffusion的相关知识,Lora的使用
一、Lora是什么
LoRA,英文全称Low-Rank Adaptation of Large Language Models,直译为大语言模型的低阶适应,这是微软的研究人员为了解决大语言模型微调而开发的一项技术。
可以理解为Stable-Diffusion中的一个插件,仅需要少量的数据就可以进行训练的一种模型。在生成图片时,LoRA模型会与大模型结合使用,从而实现对输出图片结果的调整。
我们举个更容易懂的例子:大模型就像素颜的人,LoRA模型就如同进行了化妆、整容或cosplay,但内在还在大模型的底子。当然LoRA模型不仅仅限制于人物,场景、动漫、风格都有相对应的LoRA。
二、Lora对比照片
我们可以看到,不仅在画质,还有主体形象上都有很明显的提升,这就是Lora的一个明显作用。
三、下载Lora
要使用Lora模型,那么我们需要先下载Lora才行。
1、网盘下载
我平时收集了一些比较热门的Lora,放在了网盘上,大家有需要的可以下方扫码获取。
2、网站下载
主流Lora模型一般都在C站能找到,就是这个网站:
https://civitai.com/
注意:需要梯子,这个自己想办法解决,不便的扫码找我拿也行
这里汇集了国内外各式各样的Lora模型,进入网站后依次点击主菜单栏模型(Models)—>右上角的过滤(Filters)—>点击“Lora”就能显示所有Lora模型了。
当然,如果你知道一些Lora的名字,也可以直接在顶部的搜索框中输入Lora的名字,通常只要输入开通几个字符就会自动匹配上类似的Lora供你选择了。
找到你需要的Lora后,点进去就可以下载Lora了。
此外国内也有类似的模型网站:
https://www.liblib.art/
界面与C站类似,找到自己喜欢的Lora点进去下载就可以了,有些国外的模型未收录。
四、安装Lora
下载下来的Lora是有固定路径存放的,如下图:
找到SD的主文件夹下的models目录,将下载的所有模型都放在Lora目录下即可。
如果你想对Lora进行分类,也可以像上图这样新建不同类型的文件夹,将Lora放到对应文件夹即可。
五、加载Lora
Lora下载好后,我们启动SD的WebUI界面,在生成按钮下面这里有个小红书的图标,如下图:
点击这个图标,WebUI就会显示Lora的界面了
这里就可以看到我们下载并且进行分类的各个Lora了。
如果你下载了新的Lora并存放在正确路径下,点击Lora标签右边的"刷新 "就可以看到了。
六、使用Lora
我们在写好正向提示词后,点击我们需要加的Lora图标,即可将Lora应用到提示词中了,如下图:
这里我们选择了2个Lora加到提示词中,某种程度上也可以把Lora当作一组提示词的集合。
七、Lora的组成
Lora通常由前后尖括号(<>)包围,由3部分组成,每一部分由冒号(:)隔开
第一部分的lora为固定名称,表示这是一个Lora
第二部分是Lora的具体名称
第三部分则是Lora的权重,默认是1
例如:
lora:koreanDollLikeness\_v10:0.6
lora是第一部分
koreanDollLikeness_v10是第二部分
0.6则是第三部分。
Lora的权重一般设置在0~1之间,越靠近1,Lora的表现越强烈,超过1或小于0会生成意想不到的图片。
不同的Lora是可以同时使用在一段提示词里面的,例如上面的提示词里我们就使用了2个不同权重的Lora。
八、Lora插件
我们在网站上下载Lora时,要注意它是否有触发词,例如这个Lora的触发词就是:3DMM
我们在写正向提示词时就一定要带上这个触发词,否则会生成不了这个Lora风格的图片。
Q:这么多Lora,如果都有触发词,我怎么能记住呢?
A:我们可以安装一个叫C站助手的插件,帮你记住这些Lora的触发词。
那要如何安装这个插件呢?
我们先找到这个插件的地址,这里我直接贴出来
https://github.com/butaixianran/Stable-Diffusion-Webui-Civitai-Helper
点击菜单栏里的扩展(Extentions),选择从网址安装标签,复制粘贴上面的这个网址,点击安装即可。
九、C站助手插件介绍
安装好之后,重启WebUI,即可在菜单栏看到C站助手了。
点击扫描(Scan),就会自动帮你把所有从C站下载的Lora自动打上标记,同时还能下载Lora对应的封面图,帮你进一步区分。
扫描完之后的Lora,点击这里的这个图标1。
然后我们会看到每个Lora上面都会多出来4个图标
图标2:这个是替换封面,可以将当前生成的图片替换为该Lora的封面图
图标3:这个是直达这个Lora的C站网址,点击就会跳转到Lora的下载页面
图标4:这个是Lora的触发词,点击会自动添加到提示词中
图标5:这个Lora的例图完整提示词,点击会自动将例图的提示词添加到正向提示词和反向提示词中。
有了这个插件会更加方便大家管理和使用Lora。
以上就是Lora使用的全部攻略,觉得有帮助欢迎大家转发分享给更多朋友。
所有的AI绘画工具,模型和插件资源·,AI学习资料及教程都已经整理好了,文末扫码即可免费获取噢
针对各位初学者,这里列举了一条完整的学习计划,感兴趣的可以阅读看看,希望对你的学习之路有所帮助,废话不多说,进入正题:目标应该是这样的:
第一阶段(30天):AI-GPT从入门到深度应用
该阶段首先通过介绍AI-GPT从入门到深度应用目录结构让大家对GPT有一个简单的认识,同时知道为什么要学习GPT使用方法。然后我们会正式学习GPT深度玩法应用场景。
-----------
- GPT的定义与概述
- GPT与其他AI对比区别
- GPT超强记忆力体验
- 万能GPT如何帮你解决一切问题?
- GPT表达方式优化
- GPT多类复杂应用场景解读
- 3步刨根问底获取终极方案
- 4步提高技巧-GPT高情商沟通
- GPT深度玩法应用场景
- GPT高级角色扮演-教学老师
- GPT高级角色扮演-育儿专家
- GPT高级角色扮演-职业顾问
- GPT高级角色扮演-专业私人健身教练
- GPT高级角色扮演-心理健康顾问
- GPT高级角色扮演-程序UX/UI界面开发顾问
- GPT高级角色扮演-产品经理
- GPT高级技巧-游戏IP角色扮演
- GPT高级技巧-文本冒险游戏引导
- GPT实操练习-销售行业
- GPT实操练习-菜谱推荐
- GPT实操练习-美容护肤
- GPT实操练习-知识问答
- GPT实操练习-语言学习
- GPT实操练习-科学减脂
- GPT实操练习-情感咨询
- GPT实操练习-私人医生
- GPT实操练习-语言翻译
- GPT实操练习-作业辅导
- GPT实操练习-聊天陪伴
- GPT实操练习-育儿建议
- GPT实操练习-资产配置
- GPT实操练习-教学课程编排
- GPT实操练习-活动策划
- GPT实操练习-法律顾问
- GPT实操练习-旅游指南
- GPT实操练习-编辑剧本
- GPT实操练习-面试招聘
- GPT实操练习-宠物护理和训练
- GPT实操练习-吸睛爆款标题生成
- GPT实操练习-自媒体爆款软件拆解
- GPT实操练习-自媒体文章创作
- GPT实操练习-高效写作推广方案
- GPT实操练习-星座分析
- GPT实操练习-原创音乐创作
- GPT实操练习-起名/解梦/写诗/写情书/写小说
- GPT提升工作效率-Word关键字词提取
- GPT提升工作效率-Word翻译实现
- GPT提升工作效率-Word自动填写、排版
- GPT提升工作效率-Word自动纠错、建议
- GPT提升工作效率-Word批量生产优质文章
- GPT提升工作效率-Excel自动化实现数据计算、分析
- GPT提升工作效率-Excel快速生成、拆分及合并实战
- GPT提升工作效率-Excel生成复杂任务实战
- GPT提升工作效率-Excel用Chat Excel让效率起飞
- GPT提升工作效率–PPT文档内容读取实现
- GPT提升工作效率–PPT快速批量调整PPT文档
- GPT提升工作效率-文件批量创建、复制、移动等高效操作
- GPT提升工作效率-文件遍历、搜索等高效操作
- GPT提升工作效率-邮件自动发送
- GPT提升工作效率-邮件自动回复
- GPT接入QQ与QQ群实战
- GPT接入微信与微信群实战
- GPT接入QQ与VX多用户访问实战
- GPT接入工具与脚本部署实战
第二阶段(30天):AI-绘画进阶实战
该阶段我们正式进入AI-绘画进阶实战学习,首先通过了解AI绘画定义与概述 ,AI绘画的应用领域 ,PAI绘画与传统绘画的区别 ,AI绘画的工具分类介绍的基本概念,以及AI绘画工具Midjourney、Stable Diffusion的使用方法,还有AI绘画插件和模板的使用为我们接下来的实战设计学习做铺垫。
- -----------
AI绘画定义与概述 - AI绘画的应用领域
- AI绘画与传统绘画的区别
- AI绘画的工具分类介绍
- AI绘画工具-Midjourney
- AI绘画工具-百度文心一格
- AI绘画工具-SDWebUI
- AI绘画工具-Vega AI
- AI绘画工具-微信中的AI绘画小程序
- Midjourney学习-Discord账号的注册
- Midjourney Bot界面讲解
- Midjourney提示词入门
- Midjourney高级提示词
- Midjourney版本参数学解读
- Midjourney功能参数
- Midjourney上采样参数
- AI绘画组合应用1-Midjourney + GPT
- AI绘画组合应用2-Stable Diffusion + GPT
- AI绘画组合应用3-AI绘画+ GPT +小红书
- AI绘画组合应用4-AI绘画+ GPT +抖音
- AI绘画组合应用5-AI绘画+ GPT +公众号
- AI绘画组合应用6-AI绘画+ GPT + AI视频
- AI绘画组合应用7-AI绘画+ GPT + 小说人物/场景
- AI绘画设计-Logo设计
- AI绘画设计-套用万能公式
- AI绘画设计-引用艺术风格
- AI绘画设计-GPT加速设计方案落地
- AI绘画设计-Vega AI渲染线稿生成设计
- AI绘画设计-摄影
- AI绘画设计-头像设计
- AI绘画设计-海报设计
- AI绘画设计-模特换装
- AI绘画设计-家具设计
- AI绘画设计-潘顿椅设计
- AI绘画设计-沙发设计
- AI绘画设计-电视柜设计
- AI绘画设计-包装设计的提示词构思
第三阶段(30天):AI-视频高段位
恭喜你,如果学到这里,你基本可以找到一份AIGC副业相关的工作,比如电商运营、原画设计、美工、安全分析等岗位;如果新媒体运营学的好,还可以从各大自媒体平台收获平台兼职收益。
到此为止,大概2个月的时间。你已经成为了一名“AI小子”。那么你还想往下探索吗?
- -----------
AI视频定义与概述 - AI视频制作-方案与创新
- AI视频制作-各种工具实操
- AI视频制作-美学风格(油画/插画/日漫/水墨)
- AI视频制作-形象设定(人物形象服装/造型/表情)
- AI视频画面特效处理
- AI视频画面拼接
- AI视频画面配音
- AI视频画面包装
- AI视频锁定人物逐一精修
- 多种表情动作/情节
- 动态模型转换-视频内部元素关键帧
- 动态模型转换-图像整体运动
- 动态模型转换-虚拟人
- 动态模型转换-表面特效
- AI自媒体视频-深问GPT,获取方案
- AI自媒体视频-风格设置(诗歌/文言文等)
- AI自媒体视频-各行业创意视频设计思路
- AI视频风格转换
- AI视频字数压缩
- AI视频同类型衍生
- AI视频Pormpt公式
第四阶段(20天):AI-虚拟数字人课程
- -----------
AI数字人工具简介 - AI工作台界面功能展示及介绍
- AI数字人任务确定
- AI数字人素材准备
- AI知识、语料的投喂
- AI模型训练
- AI训练成果展示及改进
- AI数字人直播系统工具使用
- AI人物在各平台直播
- AI数字人在OBS平台直播
第五阶段(45天以上):AIGC-多渠道变现课程
该阶段是项目演练阶段,大家通过使用之前学习过的AIGC基础知识,项目中分别应用到了新媒体、电子商务等岗位能帮助大家在主流的新媒体和电商平台引流和带货变现。
-----------
- AI-小红书引流变现
- AI-公众号引流变现
- AI-知乎引流变现
- AI-抖音引流/带货变现
- AI-写作变现
- AI-B站引流变现
- AI-快手引流变现
- AI-百家号引流变现
- AI-制作素材模板出售变现
- AI-周边定制变现
- AI-手机壳图案定制变现
- AI-周边产品定制变现
- AI-服装图案定制变现
- AI-个性头像定制变现
- AI-起号与知识付费变现
- AI-实现淘宝销售变现
学习是一个过程,只要学习就会有挑战。天道酬勤,你越努力,就会成为越优秀的自己。
如果你能在15天内完成所有的任务,那你堪称天才。然而,如果你能完成 60-70% 的内容,你就已经开始具备成为一名AIGC的正确特征了。
这份完整版的AIGC资料我已经打包好,需要的点击下方二维码,即可前往免费领取!