Stable Diffusion—Reference组件不炼丹也能一张图保持人物一致性

在AI绘画Stable Diffusion 的 ControlNet控制网中，** Reference（参考）** 是ControlNet的一个组件，该组件能够被用于描述使用参考图像来指导和影响新图像生成的过程。ControlNet Reference（参考） 使得用户能够指定参考图像中期望的属性、构图或风格等属性，然后将这些元素融入到新生成的图像输出中。在官方文档中介绍到：reference-only预处理是一款不需要任何控制模型即可实现使用一张图片作为参考来引导扩散，能够保证生成图片的一致性。

通过提供一个参考图像，用户就可以对SD的输出施加更多的控制。模型从参考图像中的特征中学习，并利用这些信息生成风格或内容一致的图像。

ControlNet Reference（参考） 能够帮助用户在生成过程中实现更高程度的控制和定制，使它们能够将输出引导至特定的偏好或艺术视野 。这是生成与参考图像非常相似或受其启发的图像的有价值工具，增强了用户创建期望构图的能力。

ControlNet Reference体验

本文将会深入探讨ControlNet Reference（参考） 这个图像处理强大的工具。在ControlNet Reference（参考） 预处理器中提供三种不同的选项：

• reference adain (仅参考输入图-自适应实例规范)：Reference adain 预处理器采用自适应实例归一化技术进行风格迁移。该方法允许用户将参考图像的视觉风格转移到生成输出图像。

• reference only (仅参考输入图)：Reference only预处理器可以在参考图像和注意力层之间建立直接链接。链接使模型能够在图像生成过程中专注于参考图像的特定区域。

• reference adain+attn (仅参考输入图-自适应实例规范 + Attention链接)：Reference adain+attn预处理器是结合了Reference adain和Reference only预处理器的优势。能够在转移参考图像风格的同时，建立对注意力层的直接链接 。使用两者组合允许在图像生成过程中实现更多的生成输出图像控制和定制 。

与其他预处理器不同，Reference