生成式模型终于放弃了用虚无缥缈的审美词汇讨好设计师,转而干起最脏最累的排版活。

Black Forest Labs(BFL)在发布支持原生 4K 的商业旗舰 FLUX 3 Image 之后,随即在 Diffusers 开源了 5.6B 规格的 FLUX.3 Image Klein。整套迭代的主线极其聚焦:给扩散模型套上 0 到 1000 的相对坐标框,创作者把 JSON 坐标直接写进提示词,就能像排版软件一样指定角色、道具与文字的落点。

官方随后把宣传重心推向了平民化:宣称 Klein 相比前代减小 38% 参数量,INT8 量化后能在 8GB 显存的消费级显卡上跑通,RTX 4070 单图生成低于 9 秒。

先把关键事实与限制摆在桌面上:

  • 发生了什么.BFL 开源 5.6B 图像主干,外挂 Qwen3-VL-4B-Instruct 理解排版,支持最多 10 张参考图合成,H100 蒸馏推理文生图仅需 1.93 秒。
  • 谁受影响.依赖 ComfyUI 本地出图的小型工作室拿到了排版底座,但年营收超 500 万美元的机构被商业协议拦截,且禁止任何商业化微调。
  • 现实限制.宣传中的 8GB 显存跑 4K 依赖严苛的工程折叠,8.9 秒仅是纯 GPU 步进耗时,未计入约 8 秒的文本升采样;更关键的是,本地开源版本缺乏云端未公开的像素修复锁,长链编辑依然存在像素漂移。

从抽卡玩具到工业制图,这步跨越走得扎实,但消费级显存神话与商业工业线之间的断层也从未如此刺眼。

0.995相似度与8/255偏差,图层锁死的工程真相

在商业设计流水线里,改动一顶帽子就重绘整张脸,是生成式工具无法进入严肃工业管线的死穴。BFL 试图用端到端联合去噪解决多步局部重绘,给出未编辑区域互不干扰的承诺。

评测机构 Quantslant 在单提示词包含 5 处局部定向修改的场景下做了实测,FLUX 3 Image 未修改区域的结构相似性指标(SSIM)达到 0.995,压过了同类竞品。

局部修改测试:未变动区域结构相似度(SSIM)对比 FLUX 3 Image 0.995 Ideogram 4.5 0.989 Seedream 5 Pro 0.961 测试条件:Quantslant 单 Prompt 五处局部定向修改测试;满分为 1.000。 实测提示:输出分辨率与原图存在微小变动需重采样比对,非物理像素逐位保留。

许多人据此以为模型已经具备了物理图层锁死能力。工程真相并非如此。

Quantslant 发现输出尺寸与原图并不完全一致,需要重采样才能对齐像素。更深入的硬件实测显示,非编辑区域存在每通道最高 8/255 的数值偏差。0.995 证明了宏观轮廓高度收敛,但没有消灭底层重绘带来的微观重构。一旦连续进行局部迭代,到第 31 次修改时,未触碰的背景就出现了肉眼可见的噪点堆积与画质漂移。

多参考图的交叉注入同样暴露出底层的脆弱。当系统同时接收羊毛和皮革两类材质参考时,注意力机制频繁发生跨区域渗漏,把毛衣纹理直接烙印在皮夹克上。

扩散架构天然依靠连续空间的概率去噪,擅长平滑插值,但在应对物理级静止时,数学底层依然在抖动。所谓的锁死,目前仍是肉眼级的高仿,不是工程级的恒定。

8GB 显存与 9 秒出图的剪刀差

为了把这套能力推给更多本地开发者,BFL 在宣传 Klein 时打出了平民硬件牌:号称能在 8GB 显存上运转,RTX 4070 单图耗时低于 9 秒,内部测试中 Elo 比 FLUX.2 9B 高出 91 分。

但这套消费级叙事里存在明显的测试条件剪刀差。

跑分归属与实测差异对照 Artificial Analysis 独立榜单 收录项:FLUX 3 Image(满血核心) 1114 Elo 独立盲测仅收录大模型,暂无 Klein 同榜对比:FLUX.2 flex 为 1027 分 BFL 内部自测评分 测试项:FLUX 3 Image Klein(5.6B) +91 分差 评测由厂商主导,尚未接入公开盲测 号称跨级击败 Ideogram V4.5

在第三方基准平台 Artificial Analysis 上,真正拿下 1114 Elo 高分的是闭源旗舰 FLUX 3 Image,而不是开源的 Klein。小模型的所谓高分来自官方内部测试,并未经过盲测战场的检验。

硬件规格同样存在偷换概念。台式机 RTX 4070 标配是 12GB 显存,8GB 显卡在现实中对应的往往是移动端 4070 笔记本或上一代 3070 桌面卡。移动端芯片在持续发热时的显存带宽收缩,根本跑不出理论成绩。

端到端生成耗时拆解(官方测试 vs 完整管线) 前置扩写 提示词升采样 + 语义编码 文本编码器 + 核心扩散 Distilled 16步 = 实际端到端体验 显著超过 9 秒 官方公布的 8.9 秒真相: 仅测定了 1024×1024 分辨率、无 CFG 下的纯 GPU 推理部分,未包含原生 4K 计算与单项约 8 秒的文本升采样。

官方测得的 8.9 秒耗时,是蒸馏权重在 1024×1024 分辨率、16 步(无 CFG)下的纯 GPU 去噪时间。在实际使用中,仅提示词升采样单项就能吃掉约 8 秒。用户如果真想在 8GB 显卡上跑起来,必须退守 ComfyUI 并使用 INT8 量化,原生 Python 代码库在缺乏 Blackwell 架构支持时,NVFP4 格式每步都在做反量化,只省显存不省时间。

坐标排版与切片拼接的两条路线

为了在工程中压制生成漂移,行业已经分化成两条截然不同的实现路径。

两条工程路线:端到端潜空间去噪 vs 局部裁剪拼接 FLUX 3 Image 方案 架构:原生端到端联合去噪 优势:光影自然融入,单次多目标并发 输入:支持最多 10 张参考图与框选 隐患:长链多轮编辑存在累积畸变风险 Ideogram 4.5 方案 架构:局部裁剪与边缘拼接 (Crop & Composite) 优势:非编辑区物理静止,抗漂移强 表现:10 轮迭代色漂 ΔE 维持在 2.5 局限:接缝边缘需要额外后处理融合

Ideogram 4.5 选了最保守的切片法:把要改的地方抠出来生成,再贴回原图做羽化融合。这种机械式隔离让非编辑区在 10 轮链式修改后色漂 ΔE 仍能压在 2.5,但接缝处的光影与透视往往各过各的。

FLUX 3 Image 押注的是端到端潜空间联合去噪,并用类似 JSON 的边界框给扩散流程戴上规矩。这种方案能让新增元素融入全局环境光,单次提示词就能并发调度多处修改。

但本地开源与云端商业 API 之间,依然隔着最关键的一道护城河。

排版编辑机制:本地开源与云端商业 API 的技术断层 Diffusers 本地开源实现 输入机制:JSON 序列化进 Prompt 文本流 控制方式:Cross-Attention 软性权重引导 存在缺陷:边缘溢出、非编辑区像素重绘漂移 目标一致性:依赖采样随机性,小目标易消失 BFL 云端商业 API 输入机制:多模态坐标与交互式蒙版集成 控制方式:双阶段生成 + 专属后置处理管线 工程护城河:Pixel Restoration 像素修复锁 背景保护:非目标区域实现硬性像素锁止

官方演示里移动人物而背景纹丝不动的绝妙案例,在商业 API 端背后有一道未公开的像素修复锁兜底。本地单跑开源权重,坐标只充当注意力层的软引导,没有这套后置管线,改动一处,周围整片画面的光影依然会跟着重洗。

4K成本跳升12倍与500万美元红线

技术方案进入生产管线,浪漫主义退场,算力账本立刻摆在台前。

官方公布的阶梯定价把原生 4K 变成了高净值客户专属:

分辨率规格典型输出尺寸标准单价(张)首发限时单价(张)商业适配场景
768²768 × 768 px$0.041$0.0205灵感预演与快速打样
1K 标准1024 × 1024 px$0.048$0.024社交配图与日常生产
2K 高清2048 × 2048 px$0.100$0.050数字物料与屏幕展示
原生 4K约 1600 万像素(如 5456×3072)$0.607$0.3035商业广告与大幅印刷

从 1K 的 0.048 美元跳到原生 4K 的 0.607 美元,成本暴涨超过 12 倍。在实际生产流中,没有哪套海报方案能一次成型,几十次局部调校累加下来,单图试错开销足以劝退绝大多数中小设计团队。此外 BFL 在 API 条款中写明有权使用调用者提交的素材训练模型,这直接切断了受保密协议保护的工作室走公有云的可能。

至于转向开源 Klein 的团队,FLUX Kommunity License v1.0 协议明确划出了另一道红线:只有年并表总营收低于 500 万美元的组织才能免费用于商业出图,且禁止任何形式的商业微调与二次分发。

天下熙熙皆为利来,天下攘攘皆为利往。十九世纪铁路大扩张时期,拓荒公司用免费路权把沿线城镇绑上利益网络,待轨道铺满平原,立刻转头收取昂贵的货运过路费。BFL 如今走的是完全相同的商业逻辑:用开源权重击碎旧工具的心理防线,让开发者基于 ComfyUI 搭建工作流,等所有人习惯了用坐标排版,再通过未开源的像素锁和 500 万美元门槛完成收割。

依赖免费权重搭建严肃工业流的红利期正在关闭。技术确实把混沌的构图驯服成了坐标,但通往确定性的每一步,都早已被标好了价格。