黑森林官方近日发布了重磅更新,推出了包含ControlNet、重绘模型、IPAdapter、OmniGen等一系列先进技术的FLUX模型。这次更新将FLUX模型的能力提升到了一个新的高度,使其在AI艺术创作领域具有更大的优势。本文将为您详细介绍这次更新的核心内容,帮助您更好地了解和应用FLUX模型。
FLUX模型更新概述
FLUX模型是黑森林官方推出的AI艺术创作模型,近日进行了重磅更新,引入了ControlNet、重绘模型、IPAdapter、OmniGen等一系列先进技术。
这次更新将FLUX模型的能力提升到了一个新的高度,使其在AI艺术创作领域具有更大的优势。
FLUX模型更新的核心内容
ControlNet:ControlNet是一种新型的神经网络结构,能够实现对生成过程的精确控制,提高生成作品的质量和多样性。
重绘模型:重绘模型是一种基于GAN的先进技术,能够实现对已有作品的风格转换和细节增强,使作品更具艺术感。
IPAdapter:IPAdapter是一种新型的接口技术,能够实现FLUX模型与其他模型的快速连接和协同工作,提高创作效率。
OmniGen:OmniGen是一种新型的生成技术,能够实现从单张图片生成多样化作品,满足不同用户的需求。
FLUX模型更新的应用场景
FLUX模型更新后在摄影、艺术创作、媒体制作等领域具有更广泛的应用,能够为用户提供更高质量和多样化的艺术作品。
FLUX工具
这次开放的几个工具有四个:
-
**FLUX.1 Fill: 局部重绘和扩图填充:
-
**FLUX.1 Depth: 深度控制:
-
**FLUX.1 Canny:边缘控制
-
**FLUX.1 Redux:通过提示词进行画面元素和风格重绘,也可以实现类似IPA的效果。
对,常用的controlnet已经有几个了,其中还有Redux工具,可以直接通过提示词方式进行风格重绘、元素变化等。我们分别看看官方介绍。
填充工具
其实就是inpaint功能,可以直接进行扩图和局部重绘。
重绘
扩图
官方放出的数据,推理的有效率真高~👍
## 「Canny/Depth」
作为controlnet最常用的两个控制方法,此工具真是个flux生态的大杀器。虽然前面已经有效果不错的模型,但是官方出品的明显效果更佳!
## 「Redux」
通过提示词直接进行风格重绘和元素变化。
同样的,数据在一众生图模型之上!
如何使用?
官方开放了模型权重,地址:https://huggingface.co/black-forest-labs/FLUX.1-Redux-dev
。也开放了API的调用。
ComfyUI社区也第一时间做了适配。
实在是开源之福!我为大家试试效果。
ComfyUI使用FLUX.1 Tools
❝
需要先将ComfyUI更新到最新版。
❞
Fill工具
下载模型
从https://huggingface.co/black-forest-labs/FLUX.1-Fill-dev/tree/main
,现在填充模型,放在ComfyUI/models/unet
,模型比较大,可以为是基于flux dev专门训练的重绘模型。
工作流
效果
原图:原图来自:https://civitai.com/images/25775189
局部重绘
❝
图像不够清晰,是因为机器性能扛不住了,所以缩小尺寸重绘的🥱。4090也扛不住啊~
❞
圣诞树
换装
换椅子
抱着猫
扩图
Redux工具
下载 Redux 模型到comfyui/models/style_models
。地址:https://huggingface.co/black-forest-labs/FLUX.1-Redux-dev/tree/main
工作流
使用原图的风格,生成一个新的图像。
另一个风格迁移。
效果
Depth/Canny 工具
分别下载模型,工作流是一样的。
depth/canny的效果我就不跑了,显卡扛不住,有点慢~😂。大家都可以在这里找到工作流。https://comfyanonymous.github.io/ComfyUI_examples/flux/
资料软件免费放送
次日同一发放请耐心等待
关于AI绘画技术储备
学好 AI绘画 不论是就业还是做副业赚钱都不错,但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料,给那些想学习 AI绘画 的小伙伴们一点帮助!
感兴趣的小伙伴,赠送全套AIGC学习资料和安装工具,包含AI绘画、AI人工智能等前沿科技教程,模型插件,具体看下方。
需要的可以微信扫描下方优快云官方认证二维码免费领取【保证100%免费】
**一、AIGC所有方向的学习路线**
AIGC所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,保证自己学得较为全面。
二、AIGC必备工具
工具都帮大家整理好了,安装就可直接上手!
三、最新AIGC学习笔记
当我学到一定基础,有自己的理解能力的时候,会去阅读一些前辈整理的书籍或者手写的笔记资料,这些笔记详细记载了他们对一些技术点的理解,这些理解是比较独到,可以学到不一样的思路。
四、AIGC视频教程合集
观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。
五、实战案例
纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。
这份完整版的学习资料已经上传优快云,朋友们如果需要可以微信扫描下方优快云官方认证二维码免费领取【保证100%免费】