Black Forest Labs 于周三发布了 FLUX 3 Image Klein,这是一个 56 亿参数的开放权重模型,用于文本到图像生成、图像编辑和多参考生成,该模型将公司旗舰 FLUX 3 Image 系统的主要功能降低到了 8GB 消费级显卡等普通硬件。

Black Forest Labs 博客上宣布的该版本包括原生 4K 图像生成、像素完美编辑和边界框控件,这些控件可指示元素的放置位置或将编辑限制在定义的区域 - 该公司之前为完整 FLUX 3 图像模型保留的功能。权重可根据 FLUX Kommunity 许可证下载,并且该模型也通过公司托管的 API 提供服务。它是今年最重要的开放图像模型发布之一,也是最新人工智能发展将能力生成推向日常硬件的速度的标志——有关持续报道,请参阅 AI Buzz Wire。

具有旗舰功能的小型号

尽管尺寸紧凑,FLUX 3 Image Klein 与更大的 FLUX 3 Image 共享其核心技能集。它支持最多 10 个参考图像的多参考生成,让用户将大量视觉输入混合到单个输出中。原生 4K 生成和像素完美编辑继承自旗舰产品,控制构图或限制对画布特定区域进行编辑的边界框也是如此。

Black Forest Labs 表示,该模型建立在 FLUX 3 跨图像、视频和音频的共享学习基础上:图像提供空间细节,视频添加运动和物理动态,音频提供有关事件和交互的信息。据该公司称,这些组合信号有助于模型生成感觉扎根于现实世界的图像。

该版本有两个变体——一个用于微调的基本模型和一个为低延迟生成而构建的逐步蒸馏模型——以及在 NVIDIA 支持下开发的 FP8、INT8 和 NVFP4 量化版本。 BF16 精度的生成器权重需要 11.2GB 的内存,FP8 的生成器权重需要 5.6GB 的内存。

针对较大竞争对手的基准索赔

在内部评估中,Black Forest Labs 将 FLUX 3 Image Klein 在开放权重模型中的文本到图像、多参考生成和图像编辑方面排名第一,并且在其比较集 Ideogram V4.5 和 FLUX.2 [pro] 中领先于封闭模型。在 5.6B 参数下,它是该比较中最小的模型:Qwen-Image 2.1 在 7B 参数下检查,Krea 2 在 12.9B 下检查。

与它的前任相比,收获更加具体。与 9B 模型 FLUX.2 [klein] 相比,新版本在文本到图像方面的得分高出 91 Elo,在图像编辑方面的得分高出 70 Elo,同时使用的参数减少了 38%。与所有供应商发布的评估一样,这些数字来自公司自己的内部测试,而不是独立的排行榜,因此最好将其视为强有力的公开声明,而不是既定事实。

专为消费级 GPU 打造

对于业余爱好者和小型工作室来说,最实用的标题是硬件。通过 INT8 构建,FLUX 3 Image Klein 通过 ComfyUI 或 Diffusers 在 NVIDIA GeForce RTX GPU 上运行,VRAM 低至 8GB - 将 FLUX.2 [klein] 开始的功能扩展到更小的机器。

该公司发布的由 NVIDIA 测量的速度数据显示,逐步蒸馏模型每张图像需要 16 步:使用 ComfyUI,在 RTX 5090 上处理一百万像素图像大约需要 4 秒,在 RTX 4070 上则需要不到 9 秒。基本模型有 50 步,以速度换取微调净空。

对于有数据主权要求或本地部署要求的团队,该公司的定位正是:完全在自己的基础设施上评估和调整功能强大的编辑模型的能力。在消费者方面,较小的占地面积使得笔记本电脑上的设备图像编辑变得现实而不是理想。

从第一天开始微调

基础检查点是为适应而构建的。 Diffusers 和 Ostris 的 AI Toolkit 支持开箱即用的 LoRA 训练,NVIDIA 的 NeMo AutoModel 提供了直接从已发布的检查点运行的配方。第一天的支持对于开放权重生态系统很重要,其中微调的社区变体通常决定模型传播的速度。

API 故事:扩展速度-质量前沿

对于不想在本地运行任何东西的用户,Black Forest Labs 通过其 API 提供 FLUX 3 Image Klein,并声称它扩展了速度质量 Pareto 前沿:比 Qwen-Image 2.1、FLUX.2 [pro]、Ideogram V4.5 和 Krea 2 延迟更低,在延迟点及以上时获得最高评级。

这对于公开重量级图像竞赛意味着什么

在 Krea 推出 Krea 3 几天后,该版本发布在图像生成拥挤的一周内,Krea 3 是一个以编辑为中心的模型,同一社区一直在对封闭工具进行基准测试。这种模式是一致的:参数数量正在下降,而质量要求却在上升,并且在数据中心 GPU 上运行的内容与在游戏 PC 上运行的内容之间的差距不断缩小。

如果基准声明在独立审查下成立,那么 FLUX 3 Image Klein 将使本地高质量图像编辑成为默认期望而不是妥协,并给封闭图像 API 带来进一步的定价压力。商业用户应在投入生产之前仔细阅读 FLUX Kommunity 许可条款,因为许可条件(而不是功能)越来越成为开放权重采用的决定因素。

---

保持人工智能领先地位

获取最新的人工智能新闻、分析和突破——尽在一个地方。

阅读更多人工智能新闻 →