SD创始团队黑马的Flux真的那强吗？SD Flux与华为ultrapixel大PK！群雄逐鹿！“百模”并起，王者之战~！

原创已于 2024-08-06 11:22:24 修改 · 3k 阅读

18 ·

CC 4.0 BY-SA版权

文章标签：

#人工智能 #AIGC #stable diffusion

于 2024-08-06 11:22:07 首次发布

前言

小南还是没忍住，看大家都在试玩Flux，真的有那么震撼么？小南手痒痒也体验下吧。今天主要简单介绍下Flux以及ComfyUI的安装，重点是和我们“遥遥领先”的华为开源的ultrapixel进行下对比。没有对比就没有伤害！

大家应该对Flux也有了初步了解，但小南还是先简单介绍下。

基本介绍：

简单看了下官方介绍，Flux 是迄今为止最大的 SOTA 开源文本到图像模型，这个没毛病，确实是迄今为止最大的！

FLUX.1 [schnell]拥有 120 亿个参数的整流转换器，能够根据文本描述生成图像。

FLUX.1从模型架构上看，它和之前的SD3有很多相似之处，它们都是基于FlowingMatching调度的模型，通过引入T5来增强prompt的依从性。两者较显著的区别在于：FLUX.1引入了一种叫DoubleStreamBlock的结构，具体来说在前几层layer中，采用了txt和img embedding独立过各自的transformer块，然后再拼到一起过统一的transformer块，有人推测这是为了进一步对齐图像和文本特征，但是这部分还没有更具体的技术报告。

主要功能：

增强的图像质量：
以更高分辨率生成令人惊叹的视觉效果。
先进的人体解剖和逼真度：实现高度逼真和解剖精确的图像。
改进的及时性：根据输入获取更准确、更相关的图像。
卓越的速度：受益于 Flux Schnell 的速度和效率，是高要求应用的理想选择。

**FLUX.1三种型号：**FLUX.1 [schnell],FLUX.1 [dev],FLUX.1 [pro]

版本	链接	License	说明
FLUX.1 [schnell]	https://modelscope.cn/models/AI-ModelScope/FLUX.1-schnell	apache-2.0	开源且拥有非商业许可，供社区在此基础上进行构建
FLUX.1 [dev]	https://modelscope.cn/models/AI-ModelScope/FLUX.1-dev	FLUX.1-dev Non-Commercial License	基础模型的精简版，4步出图，运行速度提高了 10 倍。
FLUX.1 [pro]	https://replicate.com/black-forest-labs/flux-pro	闭源版本	官方闭源仅可通过API访问

ComfyUI安装：

更新ComfyUI到最新版本
下载所需模型

FLUX UNET模型下载

schnell版本：

Dev版本：

建议下载fp8，小南觉得毕竟日常大家的显存都很少有超过20G以上的。fp8模型也可以在lib上下载，有人已经上传上去了，老徐也就不传了。

模型下载后存放到目录ComfyUI/models/unet/ 下。

T5文本编码模型x下载

如果你没有clip_l.safetensors 也可以一并下载，下载后存放到ComfyUI/models/clip/ 目录。

VAE模型ae.sft

ae.sft 下载后存放到ComfyUI/models/vae/目录

3.导入基本工作流

工作流可以采用导入官方图片的形式也可以直接下载相关工作流文件导入。

所有的AI设计工具，模型和插件，都已经整理好了，👇获取~
在这里插入图片描述

好了以上准备工作准备完成之后基本上就可以玩起来了！

如果你不想本地操作那么麻烦，也可以使用在线体验。在线体验链接：

https://huggingface.co/spaces/black-forest-labs/FLUX.1-schnell

1.写实人物：

**提示词：**A close-up portrait of a sex chinese woman with flawless skin, vibrant red lipstick, and wavy brown hair, wearing a white dress，wear sunglasses，sun helmet， and standing in beach，

一个性感的中国女人的特写照片，她拥有完美的皮肤，鲜艳的红色口红，棕色卷发，穿着白色连衣裙，戴着太阳镜，戴着太阳帽，站在海滩上

Flux：

在这里插入图片描述

ultrapixel：

2.风景：

**提示词：**a girl on a recreational vehicle, seaside, a few flowers, blue sky, a few white clouds, breeze, mountains, cozy, travel, sunny, best quality, 4k niji.Primitive tribes

一个女孩在休闲车上，海边，几朵花，蓝天，几朵白云，微风，群山，舒适，旅行，阳光明媚，质量最好，4k niji。原始部落

Flux：

在这里插入图片描述

ultrapixel：

在这里插入图片描述

3.产品：

**提示词：**a bottle of perfume,Ocean, still life, pink glass bottle, high quality, camera,

一瓶香水，海洋，静物，粉红色玻璃瓶，高品质，相机，

Flux：

ultrapixel：

5.卡通漫画：

**提示词：**high quality,(highres),origami,1girl,(highres),extremely detailed 8K wallpaper,(an extremely delicate and beautiful),full_shot,blue hair,school_uniform,dancing,kind_smile,

高品质，（高分辨率），折纸，1个女孩，（高精度），极其精细的8K壁纸，（极其精致美丽），饱满，蓝色头发，学校风格，跳舞，善良

Flux：

在这里插入图片描述