[ComfyUI教程]CATVTON-Flux:电商虚拟换衣！基于黑森林F1重绘和阿里In Context LORA电商服装一致性_flux ic-content lora,换装

黑客阿道夫

已于 2024-12-28 10:59:16 修改

阅读量1.4k

点赞数 18

CC 4.0 BY-SA版权

文章标签： comfyui 人工智能 AI绘画 AI作画 stable diffusion AIGC

于 2024-12-28 10:58:43 首次发布

本文链接：https://blog.youkuaiyun.com/text2203/article/details/144784834

大家好，我是AIGC阿道夫

前言

CATVTON-Flux：基于黑森林F1和阿里In-Context-LORA 虚拟换衣

🌹大家好！欢迎来到破狼公众号。感谢大家的支持与鼓励。在AIGC探索道路上，我将与你一路同行。喜欢就星标关注破狼公众号或文末扫码加入交流群！

catvton-flux虚拟换衣简介

今天文章给大家介绍一款最新的优秀的虚拟试穿解决方案：catvton-flux，这是一款结合了 CATVTON（CatVTON: Concatenation Is All You Need for Virtual Try-On with Diffusion Models） 的强大功能和Flux重绘修复模型，以实现真实且准确的衣物转移。同时catvton-flux解决方案还受到阿里In-Context LoRA提示工程的启发（[阿里InContextLoRA：更强ID一致性！基于黑森林F1身份一致性连贯视频分镜图集，10组风格无限创意]

所有的AI设计工具，安装包、模型和插件，都已经整理好了，👇获取~

请添加图片描述

• [阿里InContextLoRA：更强ID一致性！基于黑森林F1身份一致性连贯视频分镜图集，10组风格无限创意]
• [[ComfyUI]FluxFill：先进与高效重绘和扩图神器，超越阿里等同类模型，黑森林官方下场亲手打造F1生态]
[[ComfyUI]FluxRedux：超好玩创意灵感，一丝小遗憾！F1风格化溶图组件，黑森林官方下场亲手打造F1生态]

演示案例

在这里插入图片描述

catvton-flux虚拟换衣ComfyUI体验

在ComfyUI插件管理器中通过Git安装来安装ComfyUI-CatvtonFluxWrapper插件。还需科学自动下载模型，导入工作流即可开始体验。

• ComfyUI-CatvtonFluxWrapper插件：https://github.com/lujiazho/ComfyUI-CatvtonFluxWrapper
• sam2-safetensors：下载模型并放置目录**/ComfyUI/models/sam2** 。下载地址：https://huggingface.co/Kijai/sam2-safetensors/blob/main/sam2_hiera_tiny.safetensors
• xiaozaa/catvton-flux-lora-alpha：模型将自行下载放置到huggface的cache目录。下载地址：https://huggingface.co/xiaozaa/catvton-flux-lora-alpha/tree/main

Flux文生图工作流

Flux文生图感兴趣的同学可参考LIBLIB在线运行工作流：[FLUX[续篇]：12B参数23G最大开源文生图模型，Dev版直出惊艳美图欣赏]

本文涉及ComfyUI工作流和模型均可在LIBLIBAI上下载或在线运行体验：

catvton-flux虚拟换衣工作流

注意：

• catvton-flux包含大模型和LORA实现方式，大模型方式需要大于40G显存。对于消费级显存还需坐等社区GGUF量化版本。
• LORA实现方式包含两种主体人物遮罩识别方式：手工涂抹和SAM2识别，读者可以自行选择对应方式测试。
• 在线体验方式：https://huggingface.co/spaces/xiaozaa/catvton-flux-try-on

01

02

03

04

为了帮助大家更好地掌握 ComfyUI，我在去年花了几个月的时间，撰写并录制了一套ComfyUI的基础教程，共六篇。这套教程详细介绍了选择ComfyUI的理由、其优缺点、下载安装方法、模型与插件的安装、工作流节点和底层逻辑详解、遮罩修改重绘/Inpenting模块以及SDXL工作流手把手搭建。