Stable Diffusion原班人马最新力作,最强开源工具FLUX

Black Forest Labs 发行的Flux.1介绍 Flux模型凭借其强大的技术架构、丰富的功能和灵活的使用方式,在AI绘画领域树立了新的标杆。无论是专业用户还是普通爱好者,都可以通过Flux模型实现高质量的图像生成和创作。其开源特性进一步推动了AI艺术创作的发展,激发了社区的创造力和热情。 阅读详情

前言

自从 Black Forest Labs 发布了他们的 FLUX.1 套件以来,它的热度便居高不下。

接下来,我们就来一起认识一下这款模型吧。

一、关于 Black Forest Labs

Black Forest Labs 是一家专注于开发先进的生成式 AI 模型的公司。他们最近宣布了 FLUX.1 套件的发布,这是一系列用于文本到图像合成的模型。该套件旨在推动图像细节、风格多样性和场景复杂性的前沿。

Black Forest Labs 的团队在生成式 AI 领域有着深厚的背景,包括 VQGAN 和 Latent Diffusion 的创建者。他们还开发了一系列 Stable Diffusion 模型,包括 Stable Diffusion XL、Stable Video Diffusion 和 Rectified Flow Transformers。这些技术的进步使得 FLUX.1 能够生成更为逼真且细节丰富的图像。

所有的AI设计工具,模型和插件,都已经整理好了,👇获取~在这里插入图片描述

二、Flux模型概念

尽管“Flux”一词在这里指的是一个文本到图像生成模型,但值得一提的是,“Flux”一词在软件工程领域通常是指一种架构模式。在这种模式下,数据的流动应该是单向的,从数据源(通常是后端服务器或数据存储)通过一系列的操作(Actions)传递到数据存储(Stores),最后更新视图(Views)。这种设计模式简化了应用的状态管理和数据流控制,有助于减少数据不一致和状态混乱的问题。

  • Actions:触发事件,用于表示对数据的操作意图,如加载数据或提交表单。

  • Dispatcher:核心组件之一,负责接收Actions并将它们分发给各个Store。

  • Stores:用于存储应用状态和数据的地方,Store会根据接收到的Actions更新自身状态。

  • Views:根据Store中的数据来渲染用户界面的组件,当Store状态变化时,Views会自动更新以反映最新状态。

三、FLUX.1 套件概述

FLUX.1 分为三个不同的版本:FLUX.1 [pro]、FLUX.1 [dev] 和 FLUX.1 [schnell],以满足不同用户的需求。

  • FLUX.1 [pro]:这是最强大的版本,提供顶级的性能和图像质量。它具有最佳的提示遵循能力、视觉质量、图像细节和输出多样性。适用于商业用途,可以通过 Black Forest Labs 的合作伙伴 Replicate 和 fal.ai 使用。

  • FLUX.1 [dev]:这是一个开放权重、指导蒸馏的模型,适用于非商业应用。它直接从 FLUX.1 [pro] 蒸馏而来,保持了相似的质量和提示遵循能力,但效率更高。

  • FLUX.1 [schnell]:这是速度最快的一个版本,适用于快速原型制作和实验。它在速度和质量之间提供了良好的平衡。

跑分时,Dev和Pro版本明显超过了SD3以及Midjourney V6和DALL-E 3。

四、安装指南

为了让你能够快速上手,我们准备了一个简化的安装指南。请注意,具体的步骤可能会因版本和个人环境的不同而有所变化。

1. 准备环境

确保你的系统已经安装了 Python 和必要的依赖库。你可以通过运行以下命令来安装必要的库:



pip install torch torchvision``pip install transformers


  



2. 获取 FLUX.1 模型

访问 Black Forest Labs 的 GitHub 仓库或 Hugging Face Hub 页面来下载 FLUX.1 的预训练模型。对于初学者来说,推荐从 FLUX.1 [schnell] 开始,因为它在速度和质量之间提供了良好的平衡。

3. 运行示例

一旦你拥有了模型文件,就可以通过下面的 Python 脚本来尝试生成一些图像:



from transformers import pipeline # 加载 FLUX.1 schnell 模型generator = pipeline('text-to-image', model='black-forest-labs/FLUX.1-schnell') # 尝试生成一张图像image = generator(“A detailed image of a hand holding a pencil”) # 显示生成的图像``image[0].show()


  



五、测试跑图

安装完成后,你可以通过输入不同的prompt来测试FLUX的绘画效果。例如,可以尝试以下prompt来生成不同风格的图像:

  • 露肩:realistic, realism, film grain, photo by fuji-proplus-ii film, raw photo of 20 years old woman in offshoulder-top, close up portrait, deep blue sky, cloudy sky, outdoor, high key light, soft shadow, Fiery clouds

  • 棒球帽:1girl, solo, long hair, looking at viewer, red eyes, hat, hair between eyes, closed mouth, jewelry, bare shoulders, upper body, pink hair, earrings, pink eyes, off shoulder, from side, lips, ear piercing, baseball cap, hair behind ear, black sweater, general, realistic, photorealistic

甚至对于最难搞的手,也没有出现畸形的情况

在视频生成方面,

我们来看几个例子:

step1: Flux+lora生成演讲者图片

step2: Runway视频化

step3: elevenlab生成语音

step4: Runway实现语音口型匹配

FLUX彻底改变了AI图像领域

以下还有更多狂野示例:

FLUX.1 是一个非常有前景的开源工具,目前他在评测数据中已经轻松超越之前的所有模型,并且有着非常强大的文字生成能力,图像质量非常高,对比之前模型经常容易出现的手部畸形问题也得到了很好的改进,并且生成速度很快。

目前comfyui已经支持Flux.1模型,官网也可以直接使用。

这里分享给大家一份Adobe大神整理的《AIGC全家桶学习笔记》,相信大家会对AIGC有着更深入、更系统的理解。

有需要的朋友,可以点击下方免费领取!

在这里插入图片描述

AIGC所有方向的学习路线思维导图

这里为大家提供了总的路线图。它的用处就在于,你可以按照上面的知识点去找对应的学习资源,保证自己学得较为全面。如果下面这个学习路线能帮助大家将AI利用到自身工作上去,那么我的使命也就完成了:
在这里插入图片描述

AIGC工具库

AIGC工具库是一个利用人工智能技术来生成应用程序的代码和内容的工具集合,通过使用AIGC工具库,能更加快速,准确的辅助我们学习AIGC
在这里插入图片描述

有需要的朋友,可以点击下方卡片免费领取!

在这里插入图片描述

精品AIGC学习书籍手册

书籍阅读永不过时,阅读AIGC经典书籍可以帮助读者提高技术水平,开拓视野,掌握核心技术,提高解决问题的能力,同时也可以借鉴他人的经验,结合自身案例融会贯通。

在这里插入图片描述

AI绘画视频合集

我们在学习的时候,往往书籍源码难以理解,阅读困难,这时候视频教程教程是就很适合了,生动形象加上案例实战,科学有趣才能更方便的学习下去。

在这里插入图片描述

GNSS/RTK定位失效时的替代方案:视觉惯性里程计(VIO) GNSS/RTK定位失效时的替代方案:视觉惯性里程计(VIO)​ ,人工智能,计算机视觉,大模型,AI,本文详细介绍了视觉惯性里程计(VIO)作为GNSS/RTK定位失效时的替代方案。阐述了VIO的定义、优势及与其他定位技术的区别,讲解了视觉传感器和IMU的工作原理及数据融合原理,分析了时间同步、标定等关键技术,介绍了VINS-Mono等常用框架、简单代码示例、应用场景,还探讨了VIO面临的挑战与未来发展趋势,展现了其在多个领域的重要性与应用潜力。 阅读详情

相关推荐

CCS安装教程图解说明:可视化步骤快速上手

通过清晰的图解步骤详解CCS安装过程,帮助新手快速掌握环境搭建。结合ccs安装教程与实际操作界面,每一步都直观易懂,大幅降低学习门槛,提升配置效率。

weixin_42611310的博客 966

【ComfyUI】Flux 提示词太难了?Flux Prompt 轻松提示增强!更详细、更具描述性!

Flux真的太火了,小编日常也主要以Flux出图为主了。但每每写提示词时有没有人和老徐有类似的情况,就是经常为写提示词而穷思苦想呢?怎么转换成我们最适合的自然语言风格的时候就不太会描述了呢~那么大家就一起来看看今天老徐给的这款工作流节点——是否可以派上用场。

2401_84760719的博客 7554

2021年全国职业院校技能大赛高职组网络系统管理赛项

S1 Ruijie(config)#switch virtual domain 1 Ruijie(config-vs-domain)#switch 1 Ruijie(config-vs-domain)#switch 1 priority 150 Ruijie(config-vs-domain)#switch 1 description S1 Ruijie(config-vs-domain)#exit Ruijie(config)#vsl-port Ruijie(config-vsl-port)#po

bfq05234214的博客 1134

Black Forest Labs 的 Flux——文本转图像模型的下一个飞跃,它比 Midjourney 更好吗?

Black Forest Labs 推出了 FLUX.1 文本转图像模型套件,旨在为图像细节、即时性、风格多样性和场景复杂性树立新的标杆。:旗舰型号,提供顶级的图像生成性能,具有卓越的快速跟踪、视觉质量、图像细节和输出多样性。它可通过 API 获得,定位为专业和企业用途的高级选项。:一种面向非商业应用的开放式指导提炼模型。其设计旨在实现与专业版类似的质量和及时遵守能力,同时效率更高。:套件中速度最快的模型,针对本地开发和个人使用进行了优化。

知来者逆的博客 3883

ESP32学习,驱动LED点阵屏,SD卡播放GIF动图

搬运就可以实现效果,如果有不足,请批评指正。下步该学一下如何文章上视频了,老是截图不方便展示效果。

u011625956的博客 1868

【无标题】ReaxFF拟合参数以及算法安装

ReaxFF拟合参数以及算法安装

zmzyzm的博客 1421

AI绘画又有好玩的了,玩转FLUX,手和文字不再是问题了!

SD从刚开始的石破天惊之后,也断断续续更新过很多版本,但是亮点越来越少。其中显而易见的两个问题是画手和文字,FLUX在这两个方面都有巨大的提升。

2401_84830464的博客 2668

R语言生存分析之限制性立方样条分析:样条回归、和多项式回归有什么不同?是否存在非线性关系、限制性立方样条cox回归模型

R语言生存分析之限制性立方样条分析:样条回归、和多项式回归有什么不同?是否存在非线性关系、限制性立方样条cox回归模型

statistics+insight+vista+power 635

【ComfyUI】Flux 提示词太难了?你的最爱来了!Flux Prompt 轻松提示增强!更详细、更具描述性!

Flux真的太火了,我日常也主要以Flux出图为主了。但每每写提示词时有没有人和我有类似的情况,就是经常为写提示词而穷思苦想呢?怎么转换成我们最适合的自然语言风格的时候就不太会描述了呢~

yihanss的博客 2694

Unreal5从入门到精通之如何实现移动端触屏滑动手势

随着移动设备的普及,越来越多的游戏和应用选择在移动平台上发布。Unreal Engine 5(UE5)作为一款强大的游戏引擎,提供了丰富的工具和功能,帮助开发者打造出色的移动体验。UE5不仅提升了图形质量,还大幅简化了开发流程,使得开发者能够更专注于游戏设计和用户体验。在移动游戏中,触屏滑动手势是用户与应用互动的主要方式之一。然而,许多开发者在实现这些功能时常常遇到困难。为了填补这一知识空白,本篇文章将详细介绍如何在UE5中实现移动端触屏滑动手势,帮助你从入门到精通,提升你的开发技能。

TxNet 1138

基于反事实的因果推理Causal inference based on counterfactuals--一万六千字文献详细解读(因果关系的推理应用)【全文总结】

基于反事实的因果推理Causal inference based on counterfactuals--一万六千字文献详细解读(因果关系的推理应用)【全文总结】---来自一位即将入学的准研一,也希望这篇文章能够激励自己不断走下去!!

qq_46044325的博客 4442

AI绘图的场景应用:文生图、图生图

AIGC技术的未来发展前景广阔,随着人工智能技术的不断发展,AIGC技术也将不断提高。未来,AIGC技术将在游戏和计算领域得到更广泛的应用,使游戏和计算系统具有更高效、更智能、更灵活的特性。同时,AIGC技术也将与人工智能技术紧密结合,在更多的领域得到广泛应用,对程序员来说影响至关重要。未来,AIGC技术将继续得到提高,同时也将与人工智能技术紧密结合,在更多的领域得到广泛应用。感兴趣的小伙伴,赠送全套AIGC学习资料和安装工具,包含AI绘画、AI人工智能等前沿科技教程,模型插件,具体看下方。

qq_41314882的博客 7659

【Unity Shader】Special Effects(十二)Glow 外发光(UI)

Properties_GlowColor ("外发光颜色", Color) = (0, 0, 0, 1)_GlowIntensity("外发光强度", Range(0, 1)) = 1参数详解:_GlowColor:外发光颜色,指定外发光的显示颜色。_GlowIntensity:外发光强度,指定外发光的显示强度,0为不可见,1为最强强度。

神码编程 942

Flux.1 的专属提示词增强模型来啦!不用费脑,一键扩写提示词!

现在可以生成提示词的方法有很多,光随机提示词插件就有很多,也有很多类似的专门训练的提示词增强模型,甚至是借助在线的或者本地部署的大语言模型来优化增强提示词的。这里还是要吐槽一下,这个插件太简单了,内部参数都是设定死的,导致相同的原始提示词无法生成不同的提示词,也没法调整想要输出的提示词的长度,这个体验感不是很好。之前听雨也介绍了一款随机提示词插件,不过那个有点太过随机了,而且它的原理其实就是把内置的各个分类的关键提示词进行组合,用多了就会出现重复的提示词。

听雨AI绘画的博客 7580

最新的sdio 4.0 spec 协议标准 带书签 高清完整PDF版

Part-E1-SDIO-Specification-Ver4.00-Final-120220.pdf:最新的sdio 4.0 spec 协议标准 带书签 高清完整PDF版,包括SDIO 接口的外设,SDIO 接口官方协议等。

SAP B1中文培訓教材_SDK

公司内部培训资料,对开发工具 ,DIAPI, UIAPI,Add-ON有详细解说

【Stable Diffusion】最强模型——Flux推荐和下载

Flux是一个由黑森林实验室(Black Forest Lab)推出的模型,开发人员由Stable Diffusion前离职人员构成。做到了很多SD和MJ都做不到或者很难做到的事情。参数规模大****:官方号称模型有12B(120亿)参数,是迄今为止最大的开源文本到图像模型之一。在视觉质量、提示词遵循、大小/纵横比可变性、字体和输出多样性等方面超越了其他流行的模型。针对不同需求的多种模型。

2401_84760322的博客 6884

WINCC7.3破解文件

WINCC7.3硬件够破解文件,有需要的下载!WINCC7.3硬件够破解文件,有需要的下载!

FLUX | 10分钟打造旅游风格大片,旅途中的灵魂捕手!

当我学到一定基础,有自己的理解能力的时候,会去阅读一些前辈整理的书籍或者手写的笔记资料,这些笔记详细记载了他们对一些技术点的理解,这些理解是比较独到,可以学到不一样的思路。AIGC所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,保证自己学得较为全面。观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。一个卡通风格的女子,穿着长裙,在意大利威尼斯的水巷,划着贡多拉。

小王的储物间 1067

IEM模型,地表粗糙度模拟

利用微波反演土壤水分时候,利用IEM模型可以实现对随机地表的模拟

免费替代Midjourney!FLUX.1使用方法大全,支持ComfyUI

FLUX.1是由Black Forest Labs推出的开源AI图像生成模型,由Stable Diffusion原班人马打造,该模型拥有12B参数,包含三种版本:FLUX.1 [pro]、FLUX.1 [dev]和FLUX.1 [schnell]。还介绍了核心技术和4种使用教程。

qq_26303031的博客 6412

终于知道神秘的蓝莓真身了

黑森林实验室(Black Forest Labs,简称 BFL)是一家初创公司,由流行的 Stable Diffusion AI 图像生成模型的创建者创立,该模型是许多 AI 图像生成应用程序和服务(如 Midjourney)的基础。这意味着,如果提供创意工具的公司(以及其最终用户)愿意支付应用程序接口费用,就可以将 Flux 作为一个选项添加到其产品中。

weixin_41446370的博客 1300

哦吼,新模型?文生图领域的新模型FLUX.1(附模型下载网盘地址和详细使用方法)

Black Forest Labs 是由 Stable Diffusion 原班人马成立的公司,致力于研发优质的多模态模型并开源。该公司由多位前 Stability AI 研究员组成,包括 Robin Rombach 在内的团队成员,他们在图像和视频生成领域有着杰出的贡献,包括 VQGAN、Latent Diffusion 以及 Stable Diffusion 模型等 。

聚梦小课堂 1万+

Flux【基础篇】:分享一些可以在线体验Flux.1模型的网站

当我学到一定基础,有自己的理解能力的时候,会去阅读一些前辈整理的书籍或者手写的笔记资料,这些笔记详细记载了他们对一些技术点的理解,这些理解是比较独到,可以学到不一样的思路。AIGC所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,保证自己学得较为全面。优雅的极简主义,特写,专业摄影,90年代,一个超级漂亮的中国模特穿着深红色的套头衫,红色的秋天森林背景,自然光。好了,今天的分享就到这里了,希望今天分享的内容对大家有所帮助。

2401_85725028的博客 3525

Stable Diffusion 进阶篇 | FLUX 模型使用指南,打造更具创意的 AI 图像!

在 AI 绘画领域,Stable Diffusion(SD)曾是无可争议的王者,但 FLUX.1的横空出世,彻底改写了这一格局。作为由 Stable Diffusion 原班团队(黑森林实验室)打造的全新开源模型,FLUX 凭借更精准的提示词依从性、更细腻的细节表现,以及更高效的硬件适配能力,迅速成为设计师和 AI 爱好者的新宠。

m0_71745258的博客 2958

Black Forest Labs 发布 FLUX Tools:官方支持的控制模型

黑森林实验室(Black Forest Labs)发布了。

weixin_51674085的博客 394

Flux官方最新王炸模型,7合1工作流 (ControlNet+局部重绘+扩图+风格迁移)

全新 Flux 模型套件——Fill, Canny, Depth 和 Redux提供了顶级的性能和多功能性。以下是每个模型的功能以及它们如何超越竞争对手的简要介绍。Black Forest Lab 推出的全新 Flux 模型,构建了一套在 ComfyUI 中高度整合、功能强大的图像生成与编辑工作流。需要像checkpoint一样加载:这些模型类似checkpoint,需通过checkpoint加载器将它们集成到工作流中。这可能使得在单一工作流中结合 Flux 模型与其他checkpoint变得困难。

2401_85688943的博客 6162

AI图像编辑重大升级!BlackForestLabs 发布FLUX.1 Tools,为创作者提供了更强大的控制能力。

这次发布包括四项新功能:FLUX.1 Fill:最先进的图像填充与扩展模型,结合文本描述和二值掩码,支持对真实和生成图像的编辑与扩展。FLUX.1 Depth:基于深度图进行结构引导编辑,结合输入图像与文本提示,保持结构一致性.FLUX.1 Canny:基于 Canny 边缘提取进行结构引导编辑,支持输入图像与文本提示。FLUX.1 Redux:适配器工具,可混合输入图像与文本提示,实现重新创作。每个工具都推出了两种版本:[Pro] 专业版:性能新标杆。

AIGC Studio:分享AIGC前沿知识和好玩应用,公众号同名。 1019

Flux【基础篇】:完美的手&完美的脚,一切都那么完美吗?

当我学到一定基础,有自己的理解能力的时候,会去阅读一些前辈整理的书籍或者手写的笔记资料,这些笔记详细记载了他们对一些技术点的理解,这些理解是比较独到,可以学到不一样的思路。:一张RAW超写实照片,超高清,8k,1个超级漂亮的中国女孩,汉服,纹理皮肤,皮肤颗粒,全身,户外,雨,油纸伞,淡雅,淡雅,淡绿的色调。:一张RAW超写实照片,超高清,8k, 1个超级漂亮的中国女孩,牛仔短裤,上腹部,肚脐,超短裤,(全身:1.5),户外,绿色草坪,水。可以说,上面的提示词抽签到满意的图片非常困难。

小王的储物间 2759
上一篇: AI大事件丨巴黎奥运会AI修复影片、360发布AI助手、Midjourney V6.1升级
下一篇: 一文详解深度学习模型推理加速方法(stable diffusion方向)
壹只小小码农
博客等级 码龄5年 8104粉丝 1333原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值