project
FLUX 3 Image Klein - Black Forest Labs 开源的AI图像模型
FLUX 3 Image Klein 是 Black Forest Labs 开源的AI图像生成模型,仅5.6B参数,单张消费级显卡即可运行。FLUX 3 Image Klein同时支持文生图、指令式图编辑和...
FLUX 3 Image Klein是什么
FLUX 3 Image Klein 是 Black Forest Labs 开源的AI图像生成模型,仅5.6B参数,单张消费级显卡即可运行。FLUX 3 Image Klein同时支持文生图、指令式图编辑和最多10张参考图的多图生成,具备原生4K输出、像素级精确编辑和坐标框布局控制能力。官方内部盲测中文生图、编辑、多参考三项均列第一,超越Qwen-Image 2.1和Krea 2。
FLUX 3 Image Klein的主要功能
-
文生图:支持最高原生 4K 分辨率的高质量图像生成。
-
指令式图编辑:用自然语言修改图像任意部分,未指定区域像素保持不变。
-
多参考图生成:单次可接收最多 10 张参考图,保持角色、风格或产品一致性。
-
坐标框布局控制:用 0–1000 网格坐标框精确指定元素位置或限定编辑区域。
-
统一权重架构:生成、编辑、多参考任务共用同一套 5.6B 参数权重,无需切换模型。
-
消费级硬件可跑:INT8 量化版可在 8GB 显存显卡上运行,蒸馏版 4 步出图。
-
可微调生态:开放权重附 LoRA 训练支持,可定制风格、品牌或工作流。
FLUX 3 Image Klein的技术原理
- 校正流(Rectified Flow)生成范式:与传统扩散模型学习噪声到图像的曲折随机路径不同,FLUX 家族学习连接噪声与数据的近似直线路径,通过求解常微分方程而非随机微分方程完成采样,路径越直所需积分步数越少,因此蒸馏版仅需 16 步、4 步级采样即可获得高质量结果。
- MMDiT 双流 Transformer 骨干:模型以多模态扩散 Transformer 为核心,图像 token 与文本 token 在前置双流块中联合处理、通过共享注意力交换信息,再在单流块中统一精炼,使文本指令在每一层都与视觉生成深度耦合,这是其复杂提示遵循能力和文字渲染能力的结构基础。
- 独立文本编码器架构:5.6B 参数仅指图像主干,文本理解由外挂的 Qwen3-VL-4B-Instruct 编码器承担,两者解耦设计让语义理解能力与生成主干可独立升级,意味着实际部署显存占用需计入编码器开销。
- 多模态联合训练迁移:Klein 直接继承 FLUX 3 大模型的预训练成果,在图像、视频、音频三种模态上联合训练,用不同模态互为约束的机制,让小模型获得超出参数规模的视觉理解能力。
微信关注回复“开源”,加入AI开源项目交流群
如何使用FLUX 3 Image Klein
- 确认硬件:蒸馏版 BF16 需 11.2GB 显存,8GB 显卡需选 INT8/FP8 量化版,FP8 体积仅 5.6GB。
- 下载权重:从 Hugging Face 的
black-forest-labs/FLUX.3-Klein仓库拉取所需精度权重,同时下载配套的 Qwen3-VL-4B 文本编码器。 - 接受许可:点击仓库的 “Agree and access repository” 同意 FLUX Kommunity License 后方可下载,商用前核对年营收是否低于 500 万美元门槛。
- 选择部署方式:ComfyUI 用户在 Manager 中安装 BFL 官方插件后在节点图里选 Klein 模型,或用 Diffusers 通过几行 Python 代码加载。
- 编写提示词:普通文生图直接写描述,复杂排版建议启用官方 Prompt Upsampler 自动优化提示。
- 使用坐标框布局:在提示中为文字、主体等元素标注
[y_min, x_min, y_max, x_max]坐标框,模型会按网格精确放置元素。 - 图编辑操作:上传原图并用自然语言描述修改内容,如「把这条街变成雪景」,未指定区域像素保持不变。
- 多参考图生成:在 API 或 UI 中上传最多 10 张参考图并附说明文字,模型在保持参考主体一致的前提下生成新图。
- 调参出图:蒸馏版免 CFG 直接用,Base 版建议 CFG 3.5、50 步;显存不足时降低分辨率或开启量化。
FLUX 3 Image Klein的核心优势
- 参数效率:仅 5.6B 参数在官方盲测中超越 7B 的 Qwen-Image 2.1 和 12.9B 的 Krea 2,压过闭源的 Ideogram V4.5。
- 硬件门槛低:INT8 量化版可在 8GB 显存的普通消费级显卡上运行,是同类旗舰能力中部署成本最低的开源方案。
- 三任务单权重:文生图、图编辑、多参考图生成共用一套权重,无需为不同任务切换或组合多个模型。
- 布局控制能力:坐标框精确控制元素位置,此前仅见于大杯闭源模型,开源阵营中尚无同级对手。
- 像素级编辑保真:编辑时未指定区域像素完全不变,满足电商、设计等对原图零损伤的场景。
- 原生 4K 输出:无需超分放大链路,直接生成 4K 分辨率,省去二次处理的画质损耗。
FLUX 3 Image Klein的项目地址
- 项目官网:https://bfl.ai/models/flux-3-image-klein
- HuggingFace模型库:https://huggingface.co/collections/black-forest-labs/flux-3-image-klein
FLUX 3 Image Klein的同类竞品对比
| 维度 | FLUX 3 Image Klein(BFL) | Qwen-Image 2.1(阿里 Qwen) |
|---|---|---|
| 生成主干参数 | 5.6B | 7B(7.12B,32层单流 DiT) |
| 文本编码器 | Qwen3-VL-4B-Instruct(外挂) | Qwen3-VL-8B(外挂) |
| 完整管线体积 | BF16 约 11.2GB(主干),FP8 5.6GB | 约 33GB(含 8B 编码器,第三方实测 30.84GB) |
| 最低部署门槛 | INT8 可在 8GB 显存消费级显卡原生运行 | 需 CPU offload 才压到约 16GB 峰值,8GB 卡仅 Q4 GGUF 勉强可跑 |
| 最高原生分辨率 | 4K | 2K(2048×2048,最高 2752×1536) |
| 参考图上限 | 最多 10 张 | 最多 10 张 |
| 区域控制方式 | 坐标框(0–1000 网格)精准定位排版 | 圈选/涂鸦标注/独立 mask |
| 编辑保真 | 像素级精确,未指定区域逐像素不变 | 区域限定编辑,不保像素不变 |
FLUX 3 Image Klein的应用场景
-
跨境电商主图批量生产:上传 10 张参考图,用坐标框指定产品、卖点、价格签的位置,一次性生成多语言版本的 4K 商品主图。
-
电商换季图编辑:对已有商品图输入「把这条街变成雪景」,背景 seasons 全变而商品本体像素逐点保留,零修图成本产出冬季版本。
-
海报与 Banner 快速排版:在 0–1000 网格坐标框内逐一定位标题、Logo、主体图的位置,直接生成文字不错位的活动海报。
-
书籍/杂志封面设计:用坐标框固定书名与插画的相对位置,原生 4K 输出直接满足印刷分辨率,省去排版软件二次调整。
-
品牌 LoRA 定制:用自家产品图训练 LoRA,此后所有生成图自动锁定品牌色、字体和产品外观,批量产出风格统一的社媒物料。