图生图流程解析

一、介绍

本篇来介绍下图生图的流程,图生图只是在文生图基础上做了一点点的改动,再结合原理查看,你会发现和文生图类似。

二、流程步骤

回顾一下上一篇的文生图的完整流程

采样器通过模型形成一个Latent space

我们输入的参数有text prompt,通过clip编码器,是由模型提供的,变成token输入给采样器

然后用一个空的Latent图片,直接给采样器,作为基础的采样

采样器经过多次的工作,也就是对应步数那个属性,这里设置的是20步,也就是执行了20次

然后生成了Latent的结果,Latent结果经过解码,就变成了我们需要的图片了

图生图的话很简单,只要把空Latent变成我们具体要参考的图片即可,把图片当作第一次的采样参考。

这里我们修改下文生图的流程

在空白地方按下面顺序生成一下加载图像这个节点

具体图片的话,看原理流程图里面是需要先经过VAE编码后才可以接入到采样器的,所以这里把加载器的图像节点拉出来,连接一个VAE编码节点,这时候才可以去连接采样器的输入端的Latent,其实大家后面连接节点的时候可以注意节点的颜色,相同颜色的节点才可以连接。最后也要记得把VAE节点和大模型的去链接上才行。不管是CLIP编码器还是VAE编码器都是大模型提供的,所以都需要连接上。

这时候的采样器里面的降噪就是重绘幅度了,范围0-1,越大越不像原图,越小越像。这里我们用0.5测试一下

最终的流程就是这样,不同颜色也对应的不同的对应关系,记得保存哦~

再来对照一下工作原理,到此,相信大家基础入门算是打牢固了。

三、修改尺寸

上面的只是一个最基本的工作流,你会发现图片尺寸好像无法修改,只能使用图片默认的。

这时候想要修改图片尺寸,需要修改到工作流

加载图像这里拖出来,选择按如下这样,找到图像放大,通常用的就是图像缩放和图像按系统缩放。

如下图这样,按图像缩放的可以设置具体的宽高,也是最常用的,第二种就是直接设置缩放倍数。

后面常见的缩放进阶篇会具体介绍,目前大家主要知道这里可以调整尺寸大小即可。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值