一、前言
最近一段时间研究了一下Stable Diffution,Windows和MAC端都搭建成功了,也尝试了各种功能,后续会学习新的使用姿势,写一篇文章记录一下。
二、介绍
1、Stable Diffution是什么
Stable Diffusion,是一种AI绘画生成工具。Stability AI 于2023年6月发布新闻稿,宣布推出 SDXL 0.9 版本更新,升级了 Stable Diffusion 文本生成图片模型。(来源百度百科)
也就是说,我们可以通过自己输入文字描述,选择适合的模型,便可以生成想要的图片。
2、模型
要会使用Stable Diffution(后面简称SD),就要知道基本模型的分类。
(1)什么是模型
SD之所以能绘画,是因为收集了大量世界上已存在的图片来训练,这些图片训练得到的结果就是模型。可想而之,使用什么图片训练出来的模型,就只能画什么样的图,假设有一个只用了狗的图片训练出来的模型,那么我们使用这个模型就没法画出人的照片,因为它的训练数据中没有人的元素。
(2)模型分类
a.大模型
大模型一般都会比较大,差不多几个G,他决定了AI图片的主要风格,常见后缀:ckpt、safetensors。
b.Lora模型
比较小,一般几百MB,要结合大模型使用,使用的时候注意看介绍使用的哪个大模型,常见后缀:ckpt、safetensors、pt。
c.VAE美化模型
名字中带VAE,常见后缀:ckpt、pt。
d.Embeddings和Hypernetworks个性化模型
Embeddings也是属于微调模型,Hypernetworks比较少,常见后缀:pt。
e.其他模型
(3)模型下载
我常用两个网站下载:
h