Stable Diffusion V2 带来图像生成的新纪元
Stable Diffusion V2 带来了一波全新的写实主义和清晰度,其速度相比旧版本提升了 20 倍,同时质量也有显著提高。
主要变化:
- 速度提升: SDV2 的生成速度大幅提升,所需步骤从 V1 的 30 步减少到 1-4 步,效率显著提高。
- 细节更精细: SDV2 拥有更强大的解剖学理解能力,尤其是对于人类,能更准确地生成五指、五官等细节。
- 提示词优化: SDV2 对提示词的使用方式进行了调整,更长的提示词能带来更好的效果。需要在 75 个文本标记的空间内提供尽可能多的信息,简短的提示词会导致质量下降。
- 负面提示词增强: SDV2 对负面提示词的处理更加重视,不再需要大量括号来排除不良解剖结构,只需简单描述即可。
- 句子输入: SDV2 支持更复杂的句子输入,甚至可以将 ChatGPT 生成的描述直接输入,生成精美的艺术作品。
- 训练数据清理: SDV2 的基础模型已经清理了包含 NSFW 内容、在世艺术家姓名和敏感关键词的训练数据,但用户仍可以进行微调。
- Dreambooth 的潜力: 基于 SDV2 的 Dreambooth 模型展现出巨大潜力,能生成具有清晰身体比例和主题一致性的图像。
- 深度到图像合成: SDV2 引入了深度到图像合成功能,可以推断图像的深度图,保持结构一致性和准确的形状,这将彻底改变图像到图像的应用。
总结: Stable Diffusion V2 带来了一系列重大改进,包括速度提升、细节提升、提示词优化、训练数据清理和新功能,为图像生成领域带来了新的可能性。