一遍就会!Stable Diffusion 文生图最全、最强教程!

AIGC:文生图模型Stable Diffusion Stable Diffusion 是由CompVis、Stability AI和LAION共同开发的一个文本转图像模型,它通过LAION-5B子集大量的 512x512 图文模型进行训练,我们只要简单的输入一段文本,Stable Diffusion 就可以迅速将其转换为图像,同样我们也可以置入图片或视频,配合文本对其进行处理。 阅读详情

文生图/txt2img

文生图是Stable Diffusion中最基础、最实用也是最好玩的功能。顾名思义,文生图通过简单的文字描述(英文)就能生成你想要的图片。当然这个图片肯定不是完美的,如若你想生成完美的、惊艳的图片,还需要深入了解和学习文生图详细参数和功能。掌握和熟悉出图技巧,让你十秒即可出图!这就是本篇文章的目的,快来学习吧!

老规矩,提神时刻!

img

什么?很一般?

img

概览

整个SD webui 的功能其实不多,上手也比较容易,但是想出好图还是得把每个功能都研究透彻。

img

从图片我们就能得知整个sd webui有哪些功能。左上角是大模型选择,紧接着就是webui的功能菜单(文生图,图生图等)。两个大的文本框就跟用户息息相关:提示词Prompt和反向提示词Negative prompt。这个两个文本框是生图的关键设置,你的文字描述就是放在Prompt里面。

左下角就是我们的详细出图参数,下面会详细介绍,其他区域就是生成按钮和出图区域。

接下来我们就详细介绍各个部分功能,作者不是领域专家,如有错误,请包涵!

大模型

img

是什么?

是一种拥有完整结构的稳定扩散模型,是一个你拿过来即使不写提示也能生图的模型。

哪里可以获取呢?

C站、HuggingFace、Discord也可以找到。。。当然我这也有。

怎么用?

选择模型*(国风),点击生成按钮。如下。

img

没有提示词的效果也不错哈!

Prompt和Negative prompt

这两部分就是文生图的核心部分,描述准确、精炼的提示词能让的创作得心应手。

Prompt

用文字描述你想要生成的东西

支持自然语言处理,如:

A girl with long hair, Laurie. She has long hair and a double ponytail design

但更建议逐个关键词用逗号隔开,如:

1girl,loli,long hair,low twintails

Negative prompt

用文字描述你不想在图像中出现的东西

一般会直接用通用文本粘贴进去,特殊需求再单独修改

如:

lowres,bad anatomy,bad hands,text,error,missing fingers,

extra digit,fewer digits,cropped,worst quality,
low quality,normal quality,jpeg artifacts,signature,
watermark,username,blurry,missing arms,long neck,
Humpbacked,missing limb,too many fingers,
mutated,poorly drawn,out of frame,bad hands,
unclear eyes,poorly drawn,cloned face,bad face

更详细的 tag 语法后面再展开,这个环节建议以体验为主

img

让我们看看prompt提示词,如下

best quality ,masterpiece, illustration, an extremely delicate and beautiful, extremely detailed ,CG ,unity ,8k wallpaper, Amazing, finely detail, masterpiece,best quality,official art,extremely detailed CG unity 8k wallpaper,absurdres, incredibly absurdres, huge filesize , ultra-detailed, highres, extremely detailed,beautiful detailed girl, extremely detailed eyes and face, beautiful detailed eyes,light on face,(Hanfu:1.1),1girl, full body,full-body shot,

翻译结果:

img

Negative prompt(反向/负面提示词)

sketches, (worst quality:2), (low quality:2), (normal quality:2), lowres, normal quality, ((monochrome)), ((grayscale)), skin spots, acnes, skin blemishes, bad anatomy,(long hair:1.4),DeepNegative,(fat:1.2),facing away, looking away,tilted head, {Multiple people}, lowres,bad anatomy,bad hands, text, error, missing fingers,extra digit, fewer digits, cropped, worstquality, low quality, normal quality,jpegartifacts,signature, watermark, username,blurry,bad feet,cropped,poorly drawn hands,poorly drawn face,mutation,deformed,worst quality,low quality,normal quality,jpeg artifacts,signature,watermark,extra fingers,fewer digits,extra limbs,extra arms,extra legs,malformed limbs,fused fingers,too many fingers,long neck,cross-eyed,mutated hands,polar lowres,bad body,bad proportions,gross proportions,text,error,missing fingers,missing arms,missing legs,extra digit, extra arms, extra leg, extra foot,

翻译结果:

img

Prompt和Negative prompt是有使用技巧的,这里就不展开讨论。后续会专门开这一块的介绍。前期我们会复制粘贴就行。当然你肯定会问哪里粘贴?

使用提示词的效果:多了很多细节,出图也跟描述的差不多

img

出图参数详解

以下是详细的出图参数介绍,一一介绍,一看就会。

img

采样器/Sampling method

img

Stable Diffusion的webUI中,提供了大量的采样器供我们选择,例如Eular a, Heum,DDIM等,不同的采样器之间究竟有什么区别,在操作时又该如何进行选择,下文将会详细讲解采样器是如何工作的,以及各种采样器的优劣对比。

以下信息搜集网络,文末有引用链接

  • Euler a :有很高的多样性,tag利用率仅次与DPM2和DPM2 a。但是构图有时很奇葩,而且步数大于30,效果减弱
  • Euler:柔和,也适合插画,环境细节与渲染好,背景模糊较深。同时是最简单、最快的
  • LMS 是 Euler 的衍生,它们使用一种相关但稍有不同的方法(平均过去的几个步骤以提高准确性)。大概30step可以得到稳定结果,更倾向于动画的风格
  • 4.Heun:单次出图平均质量比Euler和Euler a高,但速度最慢,高step表现好。
  • 5.DPM2:该采样方法对tag的利用率最高,几乎占80%+
  • 6.DPM2 a:几乎与DPM2相同,是对于DDIM的改进,减少步骤以获得良好的结果,它的速度大约是DDIM的两倍,生图效果也非常好
  • 7.DPM fast:此为上界开发者所遗留的测试工具,不适合魔术师使用
  • 8.LMS Karras:会大改成油画的风格,写实不佳。
  • 9.DDIM:适合宽画,速度偏低,高step表现好,负面tag不够时发挥随意,环境光线与水汽效果好,写实不佳。
  • 10.UniPC 效果较好且速度非常快,对平面、卡通的表现较好,推荐使用。
  • 11.DDIM 收敛快,但效率相对较低,因为需要很多 step 才能获得好的结果,适合在重绘时候使用。
  • 12.PLMS 是 Euler 的衍生,可以更好地处理神经网络结构中的奇异性。
  • 待补充

这些大部分的采样器是由Katherine Crowson根据论文实现的功能,stable diffusion官方的blog也提到过她,她在github中有一个名为K-diffusion的项目,理论基础主要基于Jiaming Song等人的论文、Karras等人的论文以及前不久基于Cheng Lu等人的论文!

其他补充

祖先采样器

名称中带有a标识的采样器表示这一类采样器是祖先采样器。这一类采样器在每个采样步骤中都会向图像添加噪声,采样结果具有一定的随机性。

Karras后缀

LMS Karras 基于Karras论文,运用了相关Karras的noise schedule的方法,可以算作是LMS使用Karras noise schedule的版本;

DPM2 Karras,DPM2 a Karras,DPM++ 2S a Karras,DPM++ 2M Karras,DPM++ SDE Karras这些含有Karras名字的采样方法和上面LMS Karras意思相同,都是相当于使用Karras noise schedule的版本;

采样步数/Sampling steps

Stable Diffusion 的工作方式是从以随机高斯噪声起步,向符合提示的图像一步步降噪接近。随着步数增多,可以得到对目标更小、更精确的图像。但增加步数也会增加生成图像所需的时间。增加步数的边际收益递减,取决于采样器。一般开到 20~30。

记住一点:步数设置区间20-30

img

采样相关参数配合展示

img

面部修复/Restore faces

修复画面中人物的面部,但是非写实风格的人物开启面部修复可能导致面部崩坏。

img

无缝贴图/Tiling

用于生成一个可以平铺的图像

img

高分辨率修复/Hires. fix

通过勾选 “Highres. fix” 来启用。默认情况下,文生图在高分辨率下会生成非常混沌的图像。如果使用高清修复,会型首先按照指定的尺寸生成一张图片,然后通过放大算法将图片分辨率扩大,以实现高清大图效果。最终尺寸为(原分辨率*缩放系数 Upscale by)。

  • 放大算法中,Latent 在许多情况下效果不错,但重绘幅度小于 0.5 后就不甚理想。ESRGAN_4x、SwinR 4x 对 0.5 以下的重绘幅度有较好支持。
  • Hires step 表示在进行这一步时计算的步数。
  • Denoising strength 字面翻译是降噪强度,表现为最后生成图片对原始输入图像内容的变化程度。该值越高,放大后图像就比放大前图像差别越大。低 denoising 意味着修正原图,高 denoising 就和原图就没有大的相关性了。一般来讲阈值是 0.7 左右,超过 0.7 和原图基本上无关,0.3 以下就是稍微改一些。实际执行中,具体的执行步骤为 Denoising strength * Sampling Steps。

img

图片大小等

设置宽度/Width,高度/Height,生成批次/Batch count,每批数量/Batch size

img

提示词引导系数/CFG Scale

图像与你的提示的匹配程度。增加这个值将导致图像更接近你的提示,但它也在一定程度上降低了图像质量。可以用更多的采样步骤来抵消。过高的 CFG Scale 体现为粗犷的线条和过锐化的图像。一般开到 7~11。CFG Scale 与采样器之间的关系:

img

图像生成种子/Seed

种子决定模型在生成图片时涉及的所有随机性,它初始化了 Diffusion 算法起点的初始值。

img

脚本/Script

这一块内容很多,也很专业,一般使用也不用用的。我个人了解也不是很深入,后续了解比较多了,再给大家开介绍。

img

关于AI绘画技术储备

学好 AI绘画 不论是就业还是做副业赚钱都不错,但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料,给那些想学习 AI绘画 的小伙伴们一点帮助!

对于0基础小白入门:

如果你是零基础小白,想快速入门AI绘画是可以考虑的。

一方面是学习时间相对较短,学习内容更全面更集中。
二方面是可以找到适合自己的学习方案

包括:stable diffusion安装包、stable diffusion0基础入门全套PDF,视频学习教程。带你从零基础系统性的学好AI绘画!

需要的可以微信扫描下方优快云官方认证二维码免费领取【保证100%免费】

1.stable diffusion安装包 (全套教程文末领取哈)

随着技术的迭代,目前 Stable Diffusion 已经能够生成非常艺术化的图片了,完全有赶超人类的架势,已经有不少工作被这类服务替代,比如制作一个 logo 图片,画一张虚拟老婆照片,画质堪比相机。

最新 Stable Diffusion 除了有win多个版本,就算说底端的显卡也能玩了哦!此外还带来了Mac版本,仅支持macOS 12.3或更高版本。

在这里插入图片描述

2.stable diffusion视频合集

我们在学习的时候,往往书籍代码难以理解,阅读困难,这时候视频教程教程是就很适合了,生动形象加上案例实战,一步步带你入门stable diffusion,科学有趣才能更方便的学习下去。

在这里插入图片描述

3.stable diffusion模型下载

stable diffusion往往一开始使用时图片等无法达到理想的生成效果,这时则需要通过使用大量训练数据,调整模型的超参数(如学习率、训练轮数、模型大小等),可以使得模型更好地适应数据集,并生成更加真实、准确、高质量的图像。

在这里插入图片描述

4.stable diffusion提示词

提示词是构建由文本到图像模型解释和理解的单词的过程。可以把它理解为你告诉 AI 模型要画什么而需要说的语言,整个SD学习过程中都离不开这本提示词手册。

在这里插入图片描述

5.AIGC视频教程合集

观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。

在这里插入图片描述

实战案例

纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。
在这里插入图片描述
这份完整版的学习资料已经上传优快云,朋友们如果需要可以微信扫描下方优快云官方认证二维码免费领取【保证100%免费】

【文生图系列】Stable Diffusion原理篇 Stable Diffusion不是一个整体模型,它由几个组件和模型组成。首先是`文本理解组件`(text-understanding component ),将文本信息转换成数字表示,以捕捉文本中的想法。其次是`图像生成器`(image generator),图像生成器包括两步,图像信息创建者( Image information creator)和图像解码器(Image Decoder)。 阅读详情

相关推荐

本地部署Stable Diffusion教程,亲测可以安装成功

Stable Diffusion免费AI绘画软件本地电脑安装,亲测可以成功!

Pancras Wen的博客 2万+

2024年最强AI文生图工具,让创作不再枯燥

在当今数字化飞速发展的时代,人工智能在视觉创作领域大放异彩,一系列先进的 AI 工具如雨后春笋般涌现。今天向大家推荐专业文生图/视频的 AI 工具(排名不分先后),它们功能多样、各有优势,在视觉创作领域为用户提供了便捷且强大的创作支持。

siloo073的博客 1万+

(1-2)文生图大模型基础:文生图的定义与应用

文生图(Text-to-Image)是一种基于深度学习的大模型技术,通过解析和理解输入的文本描述,生成与之对应的图像。这项技术广泛应用于创意设计、广告制作、游戏开发、虚拟现实和辅助医疗等领域,不仅能提高生产效率,还能激发创作者的灵感,推动视觉内容生成的自动化和智能化。文生图模型的应用前景广阔,有望在未来改变视觉创作和内容生成的方式。

码农三叔 2190

腾讯云 AI 绘画:文生图、图生图、图审图 快速入门

腾讯云 AI 绘画是腾讯云推出的一款基于人工智能的图像生成和编辑产品,能够根据输入的图片或描述文本,智能生成与输入内容相关的图片,支持多样化的图片风格选择。您可以使用图生图来生成与输入图片相似的图片,或对输入图片进行风格转换。您可以使用文生图来生成各种类型的图片,例如风景、人物、动物等。在本文中,我们将介绍如何使用腾讯云 AI 绘画的三项主要功能:文生图、图生图和图审图。审核结果将在几秒钟内返回。文生图将根据您输入的描述文本和选择的风格,生成一张图片。图生图将根据您输入的图片和选择的风格,生成一张图片。

Winfredzhang的博客 3492

手把手调试Android 14 ShellTransitions:用Log追踪ActiveTransition与Handler匹配过程

本文详细介绍了在Android 14中调试ShellTransitions机制的方法,重点通过Log追踪ActiveTransition与Handler的匹配过程。文章提供了关键日志点植入策略、Handler匹配机制解析及实战调试案例,帮助开发者解决窗口转场动画中的卡顿和错乱问题,提升系统动画性能。

weixin_42652674的博客 429

PotPlayer 史诗级更新!实时字幕生成+实时翻译,看片真的无敌了!

potplayer已经更新实时字幕生成+实时字幕翻译功能

阿虚同学的博客 1万+

Stable Diffusion纯新手教程:文生图界面讲解

AIGC技术的未来发展前景广阔,随着人工智能技术的不断发展,AIGC技术也将不断提高。未来,AIGC技术将在游戏和计算领域得到更广泛的应用,使游戏和计算系统具有更高效、更智能、更灵活的特性。同时,AIGC技术也将与人工智能技术紧密结合,在更多的领域得到广泛应用,对程序员来说影响至关重要。未来,AIGC技术将继续得到提高,同时也将与人工智能技术紧密结合,在更多的领域得到广泛应用。感兴趣的小伙伴,赠送全套AIGC学习资料和安装工具,包含AI绘画、AI人工智能等前沿科技教程,模型插件,具体看下方。

2401_85116933的博客 1117

金融科技风险管理实践之监管评级全解

内部审计是公司治理的四大基石之一。因此,建议银行以问题与结果为导向,推动科技风险分级分类管理,重点防范重大中断、重大事件,并进一步加强科技风险评估与监测,加强对重要管理流程、重要系统、网络等重点管控环节的评估监测,对于评估发现的问题,及时完善管理手段,举一反三解决问题,提高风险管理的有效性。投入更多审计资源,加大对重点机构、薄弱环节、重要领域的审计力度,如:加强对境外机构的审计,加强网络安全、数据安全、业务连续性等高风险领域审计,加强数字化转型过程中的风险审计,以高水平安全,为数字金融高质量发展保驾护航。

银行信息系统应用架构详解 450

AI绘画Stable diffusion小白入门:文生图精讲,超全干货一定要看!

感兴趣的小伙伴,赠送全套AIGC学习资料,包含AI绘画、AI人工智能等前沿科技教程和软件工具,具体看这里。AIGC技术的未来发展前景广阔,随着人工智能技术的不断发展,AIGC技术也将不断提高。未来,AIGC技术将在游戏和计算领域得到更广泛的应用,使游戏和计算系统具有更高效、更智能、更灵活的特性。同时,AIGC技术也将与人工智能技术紧密结合,在更多的领域得到广泛应用,对程序员来说影响至关重要。未来,AIGC技术将继续得到提高,同时也将与人工智能技术紧密结合,在更多的领域得到广泛应用。

A13531922961的博客 1803

Win10 开机突然蓝屏错误代码0xc0000001安全模式也进不了,不用重装系统怎么修复?(已解决)九个解决参考方案

Win 10专业版HP480G7。

本博客,博文仅代表个人操作经验,不能完全解决你的问题,仅供参考,佛系回复。 1万+

论文阅读: 2024 ICLR AutoDAN: Generating Stealthy Jailbreak Prompts on Aligned Large Language Models

AutoDAN: Generating Stealthy Jailbreak Prompts on Aligned Large Language Models这篇论文名为“AUTODAN: GENERATING STEALTHY JAILBREAK PROMPTS ON ALIGNED LARGE LANGUAGE MODELS”,主要研究大语言模型(LLMs)的越狱攻击问题,提出了一种名为AutoDAN的新方法,能自动生成隐蔽的越狱提示,具体内容如下:

CSPhD-winston的博客 1177

一遍就会!Stable Diffusion 图生图最全、最强教程!

本文需要读者对Stable Diffusion有一定使用经历,了解文生图相关内容。部分重复内容已在文生图教程体现,如采样方法、迭代步数、

m0_74942241的博客 1757

【芯片设计- RTL 数字逻辑设计入门 番外篇6 -- 术语 Tile 介绍】

在系统级芯片(System on Chip, SoC)设计中,“tile” 是一个可以指代不同概念的术语,但通常它指的是芯片上的一个独立的功能单元或核心。一个 tile 可以包含一个或多个处理器核心、缓存、内存控制器、输入输出设备、外设接口或其他功能模块。在 SoC 上,多个 tile 可以被组合和连接起来,以形成一个完整的系统。

CodingCos的博客 3065

SD教程|一遍就会!Stable Diffusion 图生图最全、最强教程!

本文需要读者对Stable Diffusion有一定使用经历,了解文生图相关内容。部分重复内容已在文生图教程体现,如采样方法、迭代步数、面部修复、可平埔、宽度、高度、生成批次等,读者可查阅教程 文生图。

z19981的博客 1559

第6章: MMU Notifier在KVM虚拟化中的应用

本文分析了KVM如何利用MMU Notifier机制维护客户机与宿主机地址映射一致性。KVM采用三层地址空间转换架构(GVA→GPA→HPA),通过硬件辅助虚拟化(EPT/NPT)实现高效转换。重点探讨了KVM MMU Notifier回调实现,包括invalidate_range_start/end等核心函数,以及HVA范围处理流程。当宿主机内存变化时,KVM通过注册的notifier回调及时更新映射关系,确保虚拟化环境的内存一致性。文章详细解析了相关数据结构和关键代码实现,揭示了KVM内存管理的核心机制

图形/计算GPU的驱动与虚拟化技术分享园地 2320

基于ARKitScenes和YOLOv11的元宇宙3D物体检测系统设计与实现

引言随着元宇宙概念的兴起和增强现实(AR)技术的快速发展,3D物体检测成为了计算机视觉领域的重要研究方向。与传统的2D物体检测不同,3D物体检测不仅需要识别物体类别,还需要估计物体在三维空间中的位置、大小和朝向。本文将详细介绍如何利用ARKitScenes数据集和YOLOv11算法构建一个完整的3D物体检测系统,并提供可视化UI界面。相关工作与技术背景2.1 ARKitScenes数据集介绍ARKitScenes是苹果公司发布的一个大规模的3D场景理解数据集,包含丰富的室内场景数据。

YOLO 411

AI绘画 一遍就会!Stable Diffusion 图生图最全、最强教程!

本文需要读者对Stable Diffusion有一定使用经历,了解文生图相关内容。部分重复内容已在文生图教程体现,如采样方法、迭代步数、面部修复、可平埔、宽度、高度、生成批次等,读者可查阅教程 文生图

ice_99的博客 1069

精雕软件(JDpaint) 5.5 绿色版

精雕软件(JDpaint) 5.5 绿色版精雕软件(JDpaint) 5.5 绿色版精雕软件(JDpaint) 5.5 绿色版

一遍就会!Stable Diffusion 图生图最全、最强教程!_stable diffusion训练线稿上色模型 图生图

本文需要读者对Stable Diffusion有一定使用经历,了解文生图相关内容。部分重复内容已在文生图教程体现,如采样方法、迭代步数、[面部修复]、可平埔、宽度、高度、生成批次等,读者可查阅教程 文生图。

m0_71746299的博客 1347

SIMATIC S7-1200, S7-1500 PID 控制[手册]

SIMATIC S7-1200, S7-1500 PID 控制[手册]

复分析 阿尔福斯(Ahlfors) 第三版答案 英文

答案分为十章,有部分习题没有答案,全英文复分析阿尔福斯(Ahlfors) 第三版答案

Stable Diffusion室内设计文生图实操

设计师,伙伴们,用Ai设计的时候,都知道需要模型才能使效果更佳理想,但是除了模型需要训练之外,还需要提示词,好的提示词和反向词,结合模型才能,完美生成效果。今天,我就分享文生图实操,伙伴们可以借鉴,特别是提示词,这是生图的关键要素。StableDiffusion室内设计文生图1、准备一张线稿图,如下图所示;2、打开Stale Diffusion,选择Model(模型): 左边majicmixRealisticvae-ft-mse-840000和右边。

m0_58477260的博客 1448

IEM模型,地表粗糙度模拟

利用微波反演土壤水分时候,利用IEM模型可以实现对随机地表的模拟

一遍就会!Stable Diffusion 图生图最全、最强教程!_interrogate clip 下载

本文需要读者对Stable Diffusion有一定使用经历,了解文生图相关内容。部分重复内容已在文生图教程体现,如采样方法、迭代步数、面部修复、可平埔、宽度、高度、生成批次等,读者可查阅教程 文生图。

z19981的博客 1156
上一篇: Stable Diffusion基础:ControlNet之重新上色(黑白照片换新颜)
下一篇: AI抠图使用指南:Stable Diffusion WebUI Rembg实用技巧
智泊AI官方
博客等级 码龄6年 8638粉丝 2667原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值