“遇见”专属于自己的女神(Stable Diffusion - LoRa应用解析)_使用lora:低秩适应模型。(例如:某个ip动漫角色)

Stable Diffusion教学 使用Lora制作AI网红 【AI绘画真人教程】 Stable Diffusion教学 使用Lora制作AI网红 【AI绘画】一键启动/修复/更新/模型下载管理全支持! 阅读详情

StableDiffusion,一款基于深度学习的图像生成模型,以其强大的图像生成能力和个性化风格迁移能力,在艺术创作领域掀起了一场革命。而LoRa技术,作为StableDiffusion的一项重要应用,更是让用户能够根据自己的喜好,生成专属于自己的女神形象。本文将带你深入了解Stable Diffusion -LoRa应用的使用方法,助你轻松实现这一梦想。

这几天我看到上海有很多活动例如BW、CCG、ChinaJoy之类的

看到网上有很多人上传他们和各类漂亮coser的合照,那可真是羡慕死我了。

这个时候我收到了我妈的消息,她问我为什么我“女朋友”的照片总是只穿一件衣服,不是给了我钱让我去买衣服吗?

我这才发现因为我偷懒的缘故,AI绘图的成品大多只是更换了动作和背景,衣服却是固定的样式。再加上我怕改了权重较高的提示词会导致AI直接帮我换个“女朋友”的缘故,一直不敢做大幅度的改动。

至于我妈问我为什么女朋友的脸偶尔会有些微小的变化,我只能说是开美颜和不开美颜的区别了。

这时我意识到了关于LoRa的学习迫在眉睫,得赶紧学会这个东西好给我“女朋友多换几件衣服”,当然我的初衷还是为了学会好分享给在座的各位。

**所以废话少说,**让我们开始今天的学习吧!


LoRa是什么

这个模型看过我前面笔记的同学们肯定不陌生,无论是在提示词、模型标题还是抄作业的时候都会看到这个词。

在AI绘画爆火期间,无论是精美的二次元插画还是堪比真人的虚拟博主,甚至是那些让老色批都直呼awsome的赛博coser。

虽然这个模型的下载只需要区区几百MB

但是当真正使用模型的时候就会遇到一些问题,在哪里找Lora、尖括号和数字是什么意思、调用Lora的扩展插件要怎么使用等。

当然这些问题都会在这篇笔记中得到解答,如果准备好遇见专属于自己的那个“他/她”,那么就接着往下看吧。

LoRa全称Low-Rank Adaptation Model,翻译过来就是低秩适应。

LoRa最早是由微软团队提出且应用在早期的大语言模型例如GTP2、GTP3中。而第一位将LoRa引入扩散模型并辅助图像产出的人叫做Cloneofismo

在这个大神之前的SD绘图方法只能通过Dreambooth进行绘画,也就是之前提到过的Checkpoint。

Dearmbooth是一种“个性化”文本到图像扩散模型的新方法,可以根据用户的需求将扩散模型“特殊化”。给定一个主题的几张图像作为输入,然后微调一个预训练的文本到图像模型里,这样AI就学会了将唯一标识符(某些词语)与特定的主题绑在一起。

如果对大模型的产出不满意就只能重新迭代、微调,在之前也提到过大模型的对设备要求高、消耗的算力大、速度慢。

于是这位大神在微软团队的论文启发下提出了一种“微调”扩散模型的方式,也就是现如今的Lora,Lora的诞生降低了模型训练的门槛并且拓宽了产出模型的适用范围。

训练大模型最低的要求是拥有12G以上的内存,这意味着显卡至少是N卡的4070起步。但是训练Lora模型只需要8G甚至更低一下也可以,这意味着我奶奶家电脑用来炒股的1070都可以用来训练。

并且大模型CheckPoint都是1个G起步的存储空间占用,而Lora模型则大多都是在200MB以下,这样无论是在网上下载还是上传都是要快得多。

由于训练门槛的降低,现在的模型论坛和网站上有着各种各样百花齐放的创作者自己训练的lora模型。

这些Lora模型下载下来之后格式基本上都是**.ckpt或者 safetensor**

虽然说Lora的出现带来了变革,但是Lora并不是来取代Checkpoint的,相反是来加入与Checkpoint一起使用从而实现特定方面的微调。

三种调用LoRa的方式

第一种调用方式:在提示词里输入

在下载了Lora的模型之后,将其放在WebUI-models-lora文件夹里面。

Lora的文件是可以进行重命名的,不过最好还是用英文,以免在调用时出现问题。

而使用方式则是在提示词中用Lora:文件名的方式输入。

这样就能实现想要的古风效果啦

正向提示词:

polaroid photo, lora:InsPX2:0.4, 1girl, cityscape backdrop, rooftop or high-
rise balcony, dynamic composition, engaging pose, soft yet striking
lighting, shallow depth of field, bokeh from city lights, sharp details,
highly detailed, hyper-realistic, 50mm lens, naturally blurred
background,lora:FilmVelvia2:0.15,lora:hanfuTang\_v35:0.65,(hanfu, tang
style outfits, white upper shan, multicolour chest po skirt, yellow
waistband),<nwsj_v3:0.5>**

反向提示词:

cartoon, anime, sketches,(worst quality, low quality), (deformed, distorted,
disfigured, bad eyes), wrong nose, weird mouth, strange ears, bad anatomy,
wrong anatomy, amputation, extra limb, missing limb, floating limbs, (bad
teeth, mutated hands, wrong fingers:1.2), disconnected limbs, mutation,
ugly, disgusting, badhandv4, EasyNegative**

第二种调用方式:附加模型选单

在生成按钮的下方有一个按钮

这个按钮点开之后左侧会多出一行选项

这个就是额外附加网络的选项,换句话说就是可以增加扩展模型,点击里面的超模型、模型、Lora就可以直接选取已经下载过的进阶模型,选择想要的文件后系统就会自动地将这个模型添加到正向或者反向提示词中。

当然关于这个参数的选择也可以在设置中进行调节,

可以这里调节权重、宽高、顺序等等。

如果觉得显示模型的缩略图不喜欢的话可以点击缩略图左上角一个小电脑一样的图标,点击这个图标就可以用该模型生成的图来作为示例图。

通过以上两种模式生成的图片在分享作业的时候分享会将这个图片的提示词权重、模型、种子等参数等都展示出来。

但是随着Lora的不断增加,有些图像在绘画的时候会用到多个Lora或者复杂的Lora提示词,这会导致AI读取困难,于是第三种方法应运而生。

第三种调用方式:附加网络扩展(秋葉整合包自带)

这个方法需要在扩展中添加一个外置扩展:Additional Network

代码仓库地址:

(需要的小伙伴文末可自行扫描获取)

在添加之后点击应用重启WebUI之后就可以在左侧下方的参数中看到Additional Network选项。

目前附加模型的类型只能选择LoRA,在右侧的模型1中选取想要的模型。

如果在模型1列表里没有看到模型的话不要紧张,这是因为Lora模型和这个扩展里面的Lora模型并不是放在同一个文件夹中。

这个时候去到自己放置Lora模型的文件夹,将Lora文件都复制上,然后回到最开始的界面,然后找到Extension

找到sd-webui-additional-network

找到models-点进lora

最后将有的那些lora模型都放进这个文件夹中即可。

如果列表里面还是没有的话,记得点击一次下方的刷新模型列表,有些Lora不仅仅通过文件名来调用,这些lora包含多个Trigger
World并且需要在提示词里写出才生效。

所以这两个Lora路径即使是统一了也会遇到无法生效的情况。

在右侧的权重设置中0是没有效果,数值1是等同于原始的效果,一般情况下的权重设置是在0-1之间。

在下方设置完之后就不需要在上方的提示词里再填写Lora模型名,但是缺点就是在抄作业的时候直接复制提示词可能无法达成作者演示的效果,其原因就是额外加载的LoRa不会以提示词的方式展现。

目前这个拓展还支持Lora作用于图片的某一个特定区域,不过这个就是更高阶的内容了。

使用Lora的方式就是简单地选择一个模型,然后输入提示词或者上传图片,之后对参数进行配置后点击生成。

这样一来一个略微带有些网红风格的小姐姐图片就基于Lora生成了。

但是这只是Lora最简单的应用,具体的Lora应用方向是什么呢?

Lora的应用方向

网上大多数的Lora模型都是针对某一个点例如画建筑、画衣服、画老婆等等,作为一名热爱学习的学生,我的眼光应该越过那些涩涩的东西,将目光放在Lora到底能做什么上。

目前市面上的创作者产出Lora主要分为五大块:character人物角色形象、Style画风、Concept概念图、Cloth服饰和Object特定的物品/元素。

这些都会用一个具体的例子来进行举例,同时我也会上传到我的百度网盘中可供大家下载使用,当然也希望大家能够多多支持这些创作者们。

  1. Character人物角色形象

目前市面上用得最多的往往都是针对人物角色形象的创作把控,老色批们从“what is her name”变成了"what is the prompt"。

大伙最熟悉的就是赛博Coser这么个东西,为什么这个赛博Coser能突然爆火成为开车群里面的Top1话题,究其原因还是满足了人们的对于二次元角色出现在三次元时形象的幻想。

这个由AI画出来的真实系人物形象满足了大部分该游戏玩家对于这一角色在三次元形象的想象,其真实程度以至于连视频平台官方都被迷惑了。

直到这件事情火出圈后人们才发现,原来AI不只是可以画漂亮的动漫小姐姐了,而是可以”造人“了。

而回到这篇文章的标题,想要“遇见”只属于自己的女神一点也不难,现在的模型网站上有着大量基于特定游戏动漫人物角色训练的Lora。

这里我用我最爱的八重神子作为演示案例,首先我找一张八重神子的图片,然后用Tagger功能反推出这张图片的大部分特征。

然后用这组反推的提示词直接出图看看效果

即使是提示词已经蛮具体的情况下,AI还是无法完全正确地还原我老婆的形象。

这个时候就需要用到Lora了,这里我用的是一个插画风格的模型:

添加上我下载的Lora作者提供的Trigger Word以及在底下选择上Lora模型。

这样一来生成的图片就比之前生成的更像是我老婆了。

究其原因就是这个Lora是基于很多个这个角色图片作为素材训练出来的,AI就会在训练的过程中记住这个角色的特征。

例如狐狸耳朵、粉色头发、别致的头饰、摄人心魂的眼眸、飘逸的长发、端庄典雅的形象构成了独一无二的八重神子。AI所知道的粉色头发有很多种,而Lora则是让我把带有狐狸耳朵的八重神子同款粉色头发拍到了AI脸上告诉它八重神子长这样。

接下来就是如何将我的老婆带到三次元中,之前也说过模型根据素材来源的不同也分为二次元、真实系和2.5D风格。

所以在这里就切换一个真实系的模型就可以,当然提示词最好加上**best quality, masterpiece, ultra high
res,(photorealistic:1.4), raw
photo,**这些可以帮助AI提高成品真实感的词。并且提高图像的分辨率有助于成品的质感,之前提到过的所有高分辨率提升手段都可以。

点击一下生成

这样一来我的八重神子老婆就来到了三次元啦!

其实归根结底就是一个真实系的大模型+特定角色LoRa就可以得到这个角色的真实形象。

这只是一个简单的操作示范,实际上要让一张图片能够成功骗过我父母的眼睛还需要不断地优化、提示词筛选调整等等。

还有一种情况是自己喜欢的角色太过冷门以至于在网上还找不到其对应的模型,这要么只能请大佬做要么只能自己来训练模型。

除了针对某一个角色形象以外,还有一种Lora来展示某一类形象,例如汉服类Lora

这实现的是一个大方向上的整体美化,绘制出来的人物角色都会穿着中华传统服饰。

当然还有类似带有亚洲女性面孔特征的Lora等,这些Lora都可以在打造赛博Cos的时候作为调味剂添加。

2.Style风格/画风

之前有提到过Hypernetwork超网络用于特定风格的塑造,但是在Lora诞生之后创作者们可以通过投喂大量同一风格的作品来训练出模型。

在AI绘画中当然可以同时使用多个Lora,一个用于实现人物形象的描绘,另一个用于整体画风的调整。

但是画风类Lora会对整个画面的影响更大,所以需要稍微降低一些权重。

这个蝴蝶花丛围绕着的画风再放到我的八重神子老婆上会是什么样的效果?

就变成了这般惹人怜爱的模样,这就是通过Lora实现画风上的转变。

基于不同的作品和艺术家概念训练,可以将这些艺术风格精髓给更好地保留下来。

3.Concept概念

这一点要描述比较难,有点像是某种特定画风或实现形式+形象的结合体。

这个是基于大量游戏角色模型中的三视图做成的模型,用了这个模型后无论是什么角色最后产出的图都会变成例图中的三视图样式。

这类概念Lora会实现某种特定形式输出,所以对提示词和参数的设置要求都会比较高。

在开始做图前最好都读一下下方的作者留言,一般作者会在这里讲解采样器、提示词等其它参数的设置,并且最好参考例图的信息。

像是这种其实不好说是一种准确的画风,但是看到成品都能够接收到作品想要表达的信息。

4.Clothes服饰

这一种其实就是通过Lora来定义角色人物身上的服饰,服饰在概念上就是具体到衣服、裤子、鞋子、袜子之类的实现。

大部分常规服饰可以在基础模型上直接用提示词绘画出来,但是有些独特且与众不同的服饰就可以通过Lora实现。

例如机甲+女孩子=男孩子的梦中情人。

在模型网站上用Mecha作为关键词可以找到很多关于机甲的Lora,如果要增强机甲这一元素,可以在已有的提示词上增加诸如cyberpunk,
futuristic
这类提示词作为辅助,如果想要那种机甲与人结合的义肢的感觉可以加上robotic arms/legs, mechanical
parts
之类的提示词。

‍

这样一个机甲少女的形象就出现啦!

搭配这个Lora的Checkpoint有两个不错的选择,一个是二次元画风的CetusMix

另一个是带点科幻色彩的Experience

5.Objects元素

在搜索栏筛选Object类Lora时可以发现大部分的都是某一具体元素的模型,例如食物、乐器等

当训练的元素泛用性较强时就会从单个或单类元素变为蓝图。

在这里我先用上一步骤所使用的机甲少女提示词和Lora生成一个写实画风的机甲少女。

然后我找到了Civitai上有一个赛博风格头盔的Lora

https://civitai.com/models/25360

我想通过局部重绘的方式将上面的这个头盔放到机甲少女头上。

这个时候我要做的首先是将成品图片发送到局部重绘里。

然后在左下方的参数中添加这个头盔的Lora,如果在下方的重绘区域选择的是整张图片,那么上方的提示词只需要加入TriggerWord和一些形容就好:cyberhelmet,
a white cyberhelmet, head, close-up,

如果选择的重绘区域是仅蒙版,那么就需要把所有的内容型提示词都去掉,只保留Lora相关部分。

绘制重绘区域时最好把整个头部都画上,并且多画一点额外的区域,这是为了给可能出现的奇形怪状头盔预留充分空间。

然后点击生成就可以看到一个帅气的头盔带在头上了,虽然我觉得还是露脸好看些。

这样的模型是针对单一对象进行训练,其涉及的也只是画面中的一部分并不会影响整个画作的框架。

这样的Lora适合在没有开启Lora的情况下先画一幅大的画作,然后开启Lora去微调画作的部分区域。


今天的内容就到这里结束啦!

Lora作为现在学习AI绘画绕不开的一个知识点,还是需要好好学会的。

毕竟学习这个之前我老以为Lora就是漂亮小姐姐模型,只要用上了这个模型我家猫都能变成猫娘。

我要去研究怎么样让我家猫变成猫娘了,等到下周一我会专门写一篇文章将目前为止讲过的所有模型整合一下放到我的网盘里。

但由于AIGC刚刚爆火,网上相关内容的文章博客五花八门、良莠不齐。要么杂乱、零散、碎片化,看着看着就衔接不上了,要么内容质量太浅,学不到干货。

这里分享给大家一份Adobe大神整理的《AIGC全家桶学习笔记》,相信大家会对AIGC有着更深入、更系统的理解。

有需要的朋友,可以长按下方二维码,免费领取!

在这里插入图片描述

AIGC所有方向的学习路线思维导图

这里为大家提供了总的路线图。它的用处就在于,你可以按照上面的知识点去找对应的学习资源,保证自己学得较为全面。如果下面这个学习路线能帮助大家将AI利用到自身工作上去,那么我的使命也就完成了:
在这里插入图片描述

AIGC工具库

AIGC工具库是一个利用人工智能技术来生成应用程序的代码和内容的工具集合,通过使用AIGC工具库,能更加快速,准确的辅助我们学习AIGC
在这里插入图片描述

有需要的朋友,可以点击下方卡片免费领取!

精品AIGC学习书籍手册

书籍阅读永不过时,阅读AIGC经典书籍可以帮助读者提高技术水平,开拓视野,掌握核心技术,提高解决问题的能力,同时也可以借鉴他人的经验,结合自身案例融会贯通。

在这里插入图片描述

AI绘画视频合集

我们在学习的时候,往往书籍源码难以理解,阅读困难,这时候视频教程教程是就很适合了,生动形象加上案例实战,科学有趣才能更方便的学习下去。

在这里插入图片描述

有需要的朋友,可以长按下方二维码,免费领取!

在这里插入图片描述

不管黑丝或者白丝还是想撕坏它,都可以用LoRA(Stable Diffusion进阶篇:ComfyUI 附加网络) 当我学到一定基础,有自己的理解能力的时候,会去阅读一些前辈整理的书籍或者手写的笔记资料,这些笔记详细记载了他们对一些技术点的理解,这些理解是比较独到,可以学到不一样的思路。AIGC所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,保证自己学得较为全面。观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。 阅读详情

相关推荐

龙迅LT9611UXC芯片简介:Dual-Port MIPI DSI/CSI to HDMI2.0 with Audio

龙迅半导体推出的LT9611UXC是一款高性能MIPI转HDMI2.0转换器,支持DSI/CSI接口转换,兼容多种视频格式(RGB/YCbCr),最高支持4K@60Hz输出。该芯片集成音频处理(I2S/SPDIF)、色彩空间转换和3D功能,适用于机顶盒、电视盒子等消费电子及车载设备。提供工业级(-40℃~+85℃)和车规级(AEC-Q100认证)版本,采用QFN64封装。

MB16698594834的博客 1336

stable diffusion(Lora的训练)

以坤坤为例,上网随便找了几个坤坤的人脸图像,作为训练的数据集。

qq_44963223的博客 1万+

Dify DSL文件分享 Dify讨论群 大模型token资源等(持续收集更新)

基于LLMOps平台-Dify的一站式学习平台。包含不限于:Dify案例、DSL文件分享、模型接入、Dify交流讨论等各类资源分享。

同名公众号:dify实验室 3719

手把手教你用LoRA训练自己的Stable Diffusion模型

StableDiffusion大家已经很熟悉了,那么如何训练自己的sd模型呢,今天我就介绍一下用LoRA训练sd的方法。我们以Chilloutmix为例,Chilloutmix可以生成好看的小姐姐。为了实验LoRA的能力,我们用小哥哥的图片对它进行微调,看效果如何。

xian0710830114的专栏 1万+

AHRS互补滤波(Mahony)算法及开源代码

AHRS(Attitude and heading ref AHRS(Attitude and heading reference system,也就是航姿参考系统。在互补滤波算法中传感器主要采用了IMU(陀螺仪、加速度计)和磁力计。 AHRS的基本思想是,在载体没有平移运动的情况下,通过加速度感知重力分量,可以计算出载体的俯仰(Pitch)和横滚(Pitch);磁力计可以感知磁北方向,因此可以计算载体的磁北航向;而陀螺仪测量输出载体的旋转角速度,通过积分可以计算得到横滚、俯仰、航向增量,但由于陀螺输出值含

weixin_42918498的博客 3万+

system_stm32f10x.c文件分析

配置系统时钟(包括系统时钟源、锁相环(PLL)倍频系数、高级高性能总线(AHB)/ 高级外设总线(APBx)预分频器以及闪存相关设置)。该函数在系统复位后的启动阶段被调用,且调用时机早于跳转到主程序之前。

Jia shuheng的博客 604

基于LoRA微调部署Stable Diffusion【免费试用阿里云】

Stable Diffusion 是一种文本到图像的潜在扩散模型,由 Runway 和慕尼黑大学合作构建,第一个版本于 2021 年发布。目前主流版本包含 v1.5、v2和v2.1。它主要用于生成基于文本描述得详细图像,也应用于其他任务,如修复图像、生成受文本提示引导的图像到图像的转换等。本文主要讲解如何免费在**阿里云交互式建模(PAI-DSW)**中基于LoRA微调并部署 Stable Diffusion。

dzysunshine的博客 3235

uniapp+openlayers集成天地图实战:renderjs通信陷阱与性能优化避坑指南

本文深入探讨了uniapp与openlayers集成天地图时的renderjs通信陷阱与性能优化策略。通过实战案例解析了renderjs的特殊通信机制、地图实例生命周期管理、图层懒加载等关键技巧,帮助开发者避免常见坑点,提升应用流畅度。特别针对多语言切换、热重载偏移等疑难问题提供了解决方案,是uniapp+openlayers开发者的实用避坑指南。

weixin_30872157的博客 363

【stable diffusion原理】LoRA 在 Stable Diffusion 中的三种应用:原理讲解与代码示例

如果你一直关注 Stable Diffusion (SD) 社区,那你一定不会对 “LoRA” 这个名词感到陌生。社区用户分享的 SD LoRA 模型能够修改 SD 的画风,使之画出动漫、水墨或像素等风格的图片。但实际上,LoRA 不仅仅能改变 SD 的画风,还有其他的妙用。在这篇文章中,我们会先简单学习 LoRA 的原理,再认识科研中 LoRA 的三种常见应用:1) 还原单幅图像;2)风格调整;3)训练目标调整,最后阅读两个基于 Diffusers 的 SD LoRA 代码实现示例。

z19981的博客 3067

从Reset到Read:深入解析Rolling Shutter曝光流水线

本文深入解析Rolling Shutter(卷帘曝光)的工作原理,重点探讨Reset和Read信号在图像传感器中的关键作用。通过Reset-Read流水线机制,详细解释了曝光控制、时序调优及运动伪影补偿等核心技术,帮助读者理解卷帘曝光在高速摄影和动态场景中的应用。

weixin_42531925的博客 257

十三种通信接口芯片——《器件手册--通信接口芯片》

通信接口芯片用于实现差分信号的传输,具有抗干扰能力强、传输距离远等优点。RS485支持多点通信,可连接多个收发器,而RS422支持单向多点通信。广泛应用于工业自动化、过程控制、仪器仪表、楼宇自动化(如暖通空调、保安系统)、电机控制等领域。ST3485EBDRTP8485ESR用于实现串行通信,支持点对点通信,传输距离相对较短,数据速率较低。常用于计算机与外设(如打印机、调制解调器)之间的通信。如芯力特的SIT3232,可作为ST3232的替代品。

XU157303764的博客 4276

Stable Diffusion: Lora篇

AIGC研究及应用系列

duhaining1976的博客 1957

在Simulink中建立一个含高比例风电接入的弱电网模型

本文介绍了使用Simulink对含高比例风电接入的弱电网进行建模和稳定性分析的方法。主要包括创建Simulink项目、搭建风电场模型(含风力发电机和变流器)、建立弱电网模型、设计控制系统(MPPT算法等)、添加监测模块等步骤。通过仿真分析电网的电压稳定性、频率波动和动态响应等关键指标,评估高比例风电接入对弱电网的影响。该建模方法为研究可再生能源并网问题提供了实用工具,但实际应用中需根据具体条件细化模型参数和控制策略。

amy_mhd的博客 168

【stablediffusion】AI动漫转真人终极教程!3步做出爆款内容,一键定制你的专属动漫头像,轻松上手,小白也能学会!AI绘画

今天,我们将向您介绍一项令人兴奋的AI技术——动漫转真人。这是一款基于Stable Diffusion技术的创新应用,旨在为您提供一键式将动漫角色转换为真实人像的便捷体验。无论您是AI绘画的新手还是专业人士,这个工具都能为您带来极大的便利。

Eqiqi的博客 1987

霍尼韦尔SoftMaster使用说明

霍尼韦尔SoftMaster使用说明

ssm框架搭建

这个是一个在idea上成功跑起来的ssm框架项目,保存在这里方便以后使用直接下载

比迪丽WebUI常见问题解决:端口不通、生成失败、图片模糊全解析

本文介绍了在星图GPU平台上自动化部署比迪丽(Videl / Bidili) AI绘画LoRA角色模型镜像的常见问题解决方案。该镜像主要用于生成《龙珠》角色比迪丽等动漫风格图片,文章详细解析了端口不通、生成失败及图片模糊等问题的排查与修复方法,帮助用户快速上手并稳定运行AI绘画应用。

weixin_30299319的博客 583

android 蓝牙通讯demo

android 下蓝牙通讯demo,实现了发现蓝牙,使能蓝牙,通过蓝牙发送消息。

Stable Diffusion Lora模型训练详细教程

stable diffusion lora模型训练

程序员深度学习 5万+

廖雪峰Python教程[完整版]

廖雪峰的python教程整理的,已经排好版了,而且还是完整的,适合小白

“遇见”专属于自己的女神(Stable Diffusion - LoRa应用解析)

大家好我是极客菌!!!Stable Diffusion,一款基于深度学习的图像生成模型,以其强大的图像生成能力和个性化风格迁移能力,在艺术创作领域掀起了一场革命。而LoRa技术,作为Stable Diffusion的一项重要应用,更是让用户能够根据自己的喜好,生成专属于自己的女神形象。本文将带你深入了解Stable Diffusion - LoRa应用的使用方法,助你轻松实现这一梦想。这几天我看到上海有很多活动例如BW、CCG、ChinaJoy之类的。

2401_85688943的博客 1175

AI绘画工具,Stable Diffusion Lora使用攻略

安装好之后,重启WebUI,即可在菜单栏看到C站助手了。点击扫描(Scan),就会自动帮你把所有从C站下载的Lora自动打上标记,同时还能下载Lora对应的封面图,帮你进一步区分。扫描完之后的Lora,点击这里的这个图标1。然后我们会看到每个Lora上面都会多出来4个图标图标2:这个是替换封面,可以将当前生成的图片替换为该Lora的封面图图标3:这个是直达这个Lora的C站网址,点击就会跳转到Lora的下载页面图标4:这个是Lora的触发词,点击会自动添加到提示词中。

阿道夫的博客 1175

Stable-DiffusionLoRA模型训练教程

在训练LoRA模型之前,我们需要首先明确自己需要训练什么类型的LoRA,有的博主将模型分成了几个大类:人物角色、画风/风格、概念、服饰、物体/特定元素等。我只简单的划分为两类:具象类和泛化类,具象类如:一个物体、一种姿势、一种服装、一个人物、某个特定元素等都可以划归为具象类。泛化类如:某种场景、某种艺术风格、色彩风格等。前期明确目的的训练能更好的确定要找素材的数量及选择的大模型类型,为后面的具体训练打好基础。⚠️ 「大模型的选择」和「图片质量」都是收集素材的关键!

蓝天白云 3350

AI绘图的场景应用:文生图、图生图

AIGC技术的未来发展前景广阔,随着人工智能技术的不断发展,AIGC技术也将不断提高。未来,AIGC技术将在游戏和计算领域得到更广泛的应用,使游戏和计算系统具有更高效、更智能、更灵活的特性。同时,AIGC技术也将与人工智能技术紧密结合,在更多的领域得到广泛应用,对程序员来说影响至关重要。未来,AIGC技术将继续得到提高,同时也将与人工智能技术紧密结合,在更多的领域得到广泛应用。感兴趣的小伙伴,赠送全套AIGC学习资料和安装工具,包含AI绘画、AI人工智能等前沿科技教程,模型插件,具体看下方。

qq_41314882的博客 7667

Stable Diffusion【模型篇】:LORA模型

LORA模型,可以简单的理解是大模型的补丁,用于满足一种特定的风格,或者指定的人物特征或动作特征,增强绘制图片的细节。(1)LORA模型必须结合大模型一起使用,所以使用LORA模型时候,务必要清楚这个LORA模型是在哪些模型下面训练出来的,一般在LORA模型下载界面的介绍信息中或者提供的图片中可以查到。(2)要习惯阅读LORA模型下载界面对于该模型相关的介绍信息,不管是国外还是国内网站提供的模型界面,模型上传的大神们很多都提供了详细的使用说明,我们了解了之后,在具体使用的时候会让我们少走很多弯路。

小王的储物间 5044

使用Linux训练LoRA模型

2023年春节后,我发现Stable Diffusion webui更新了LoRA模块,突然间LoRA这个名词在AI绘图中火了起来,civita网站也突然间多了很多各式各样的模型,这时候LoRA彻底火出圈了~然后,特么尴尬的来了,Stable Diffusion webui中的Dreambooth extension训练所产生的LoRA小模型,无法在webui中的LoRA模块进行加载,这大大限制了原友们的创作热情。--reg_data_dir是刚才设置的1_girl文件夹的上一级文件夹的路径;

张伟的专栏 3441

StableDiffusion 学习笔记 - 训练 LoRA

跑了一下,居然爆了我的 3090 涡轮卡的 24G 显存,找打了一片文章,可以调优参数 https://www.cnblogs.com/huggingface/p/17108402.html。最近一直在学习使用 Stable Diffusion,目前开始学习 LoRA 训练,试图使用 LoRA 微调预训练模型,实现脸型替换等常用功能。工具,但是没有理解数据集的准备方式,翻阅代码也没有理解到有用的信息。工具,它可以裁切缩放原始图像,最重要的是。,看了一遍参数,发现传入参数需要。,写了一段简单的代码,从。

无限进步 7279

Stable Diffusion - 人物坐姿 (Sitting) 的提示词组合 与 LoRA 和 Embeddings 配置

拍摄人物坐姿时,选择一个舒适和自然的坐姿,符合个性和心情。可以坐在椅子、沙发、长凳、凳子或者地上。避免坐得太僵硬或者太懒散。放松肩膀和颈部,保持背部直但不僵硬。

AGI 5929

Stable Diffusion安装与常见错误(+Lora使用)2023年最新安装教程

帮你快速搭建Stable Diffusion(2023年版本)

cycyc123的博客 5万+

AI绘画软件Stable Diffusion的Lora模型详解与使用教程

在[AI绘画]领域,StableDiffusion作为一种强大的文本到图像的生成模型,已经吸引了众多艺术家和爱好者的关注。而Lora(Low-RankAdaptation)模型作为StableDiffusion的一个重要扩展,进一步提升了模型的微调效率和生成质量。本文将详细介绍Lora模型的基本概念、工作原理以及如何在StableDiffusion中使用Lora模型,为希望提升AI绘画技能的读者提供一份详尽的指南。

Android 开发架构 1465
上一篇: 【stable diffusion实用教程】:SD 修复 Midjourney 有瑕疵照片
下一篇: 影楼面临淘汰?【StableDiffusion】真人摄影大模型:革新影像创作新纪元
壹只小小码农
博客等级 码龄5年 8105粉丝 1333原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值