Skip to content
←返回领域赋能

能力资产

图像生成设计与前端梯顶

FLUX:把图像生成从「出图」推进到「可控编辑 + 开放权重」的那条主线

flux

Black Forest Labs 的 FLUX 家族用整流流(rectified flow)Transformer 做图像生成,并放出 Apache-2.0 的 dev 档权重,是开源侧最重要的图像基线;Kontext 一档把「按指令改这张图的局部而不动其余」做成了可用能力。采集库里另有 FLUX 3 的发布记录,厂商把它定位成统一图像/视频/音频的世界模型,这一主张记为待核验。

C
置信度
厂商宣称
只有官方模型卡/发布会,无独立复测
Apache-2.0
关键指标
开放权重档位(dev)
厂商宣称 · 2024-08
成熟度
产品
研究 → 演示 → 产品 → 生产
编辑判断

FLUX 在这条阶梯上的位置很特别:它既是产品(API 与 pro 档),又是公共基线(Apache-2.0 的 dev/schnell 权重可以在自己机器上跑、可以微调)。对 AIGC 情报站来说,第二种身份更值钱——整个开源图像生态的 LoRA、ControlNet、加速与量化工作大量围绕它展开,所以「图像生成现在能做到什么」这个问题,拿它当参照系比拿任何一个闭源服务当参照系都更稳。

需要如实标注的是:这一轮没有重新核验第三方竞技场的最新排名,卡片上的置信度是 C(厂商宣称)而不是 A。真正属于 A 级事实的只有一条:dev 档权重确实是 Apache-2.0 且仓库公开可查(已核验)。

至于 FLUX 3 被定位成「真实世界模型」而不只是生成模型,这是当前最值得盯的一条主张:如果图像、视频、音频共享同一个流匹配底座并且能预测动作后果,那它就不只是内容工具,而是通往具身智能的感知-预测通道。但采集到的只有发布材料,没有独立评测,所以它按厂商宣称处理,不当结论用。

Image GenerationOpen Weights流匹配Image Editing
Black Forest Labs官网github.com/black-forest-labs/flux1 min read1090

这条家族线的三件事

一、架构是整流流 Transformer,不是 U-Net。FLUX 用的是 flow matching 目标 + Transformer 主干,配合旋转位置编码与双流/单流混合的 block 结构。这带来的直接结果是分辨率与长宽比的适配比传统 U-Net 扩散更自然,也更适合往视频与多模态延伸。

二、分档发布:pro / dev / schnell。pro 只走 API,dev 是 Apache-2.0 的开放权重档,schnell 是步数极少的加速档。这种「闭源最强 + 开放可用」的双轨是它成为生态底座的原因:研究者和独立开发者用 dev,生产系统按需要选 pro 或自托管 dev。

三、Kontext 把「编辑」变成一等能力。此前的图像生成主要是「从提示词出一张新图」,Kontext 一档做的是在保留其余像素语义的前提下按指令修改局部——换服装、改材质、调姿态、加物体。这是图像生成进入真实设计流程的分水岭:设计师要的不是重新抽卡,而是「把这里改掉,别的地方别动」。

它在设计流水线里的真实位置

可用姿势是可控的迭代器:概念阶段用文生图铺量,选定方向后用 Kontext 类编辑能力做定向修改,最后由人完成版式、字体与品牌规范。收益最大的一段是「同一个主体出多个变体而保持身份一致」——角色、产品、包装的视觉一致性,是纯文生图长期做不好、编辑式生成才勉强做到的事。

任务当前可用度主要风险
概念图 / 情绪板高版权与风格来源不清
产品图变体(换背景/材质)中高细节漂移,logo 与文字易坏
角色一致性(多角度/多场景)中身份漂移,需要参考图与人工筛选
含文字的版面(海报/UI)低字形错误率高,应交给排版工具
像素级精修(修瑕/局部重绘)中高蒙版边界融合需要手工

边界与失败模式

  • 文字与字形:长文本、小字号、非拉丁文字仍是高失败区。
  • 手部与机械结构:明显改善但没有消除,精密结构(齿轮、接口、乐器)仍会给出「像但不对」的结果。
  • 编辑的影响半径:局部编辑会悄悄改动相邻区域的色调与纹理,批量生产时必须做前后对比质检。
  • 自托管成本:dev 档的显存与单图耗时都不可忽略,批量场景需要量化或加速档,而加速会换来质量损失。
  • 许可边界:dev/schnell 的 Apache-2.0 与 pro 的商用条款是两套东西,混用会在合规上出问题。

待核验清单(我们下一步做什么)

要把这条从 C 升到 A:在自己的环境下用同一批提示词测 dev 档的出图质量与耗时;对 Kontext 类编辑做「影响半径」量化(编辑区外的像素变化率);把 FLUX 3 的世界模型主张与我们已采集的具身动作预测证据放在一起对读。这些跑完之前,本页的排名与读数按厂商口径理解。

同域资产:图像生成

4
图像生成设计与前端梯顶C

Qwen-Image-2.1:一套开放权重同时做生成、局部编辑与透明输出

阿里 Qwen 的图像生成与编辑一档,把文生图、局部编辑(圈选/涂抹/独立 mask)、最多 10 张参考图融合与原生 RGBA 透明输出收进同一个 7B 视觉生成组件(32 层 Single-Stream DiT),并用混合粒度注意力与前缀 KV 缓存复用压低批量出图的边际成本;原生 2048px、7 档宽高比。它是当前可下载权重里图像竞技场排位最靠前的一档(文生图第 17 / Elo 1228,图像编辑第 16 / 1367),但许可是 Qwen Research License 而非 Apache-2.0,商用前必须单独读条款,diffusers 还需从 git 主干安装。未做基准复现,置信度记 C(厂商宣称)。

7B视觉生成组件参数厂商宣称 · 2026-09
产品阿里 Qwen (Alibaba)官网Repo
Qwen-Image-2.1:一套开放权重同时做生成、局部编辑与透明输出
视频生成影音创作梯顶C

可灵 3.0 系列:音频原生进模型、画面到 4K,参数化镜头语言仍是它的护城河

快手可灵是国内最早把视频生成推到「能接商业单」水位的一条主线,长期强项不在纯文生视频,而在图生视频与运镜控制:先由图像环节锁定构图与角色,再让视频模型在确定的关键帧上补间,配合首尾帧约束与推/拉/摇/移/环绕/跟随的镜头参数,做出可预测的短片段。3.0 系列(官方 release-note 横幅:全面开放 API)带来三处实质跃迁——音频原生进模型(5/10/12 秒音频档)、图像与视频原生 2K/4K、智能分镜与元素参考把多镜头连贯从剪辑问题变成模型可控问题;型号分工为 3.0 / 3.0 Omni / 3.0 Turbo、Kling Image 3.0 与 -omni、Native 4K Video、Motion Control。竞技场水位说实话:图生视频 kling-v3-pro 第 19(Elo 1354),前面是 MiniMax h3、gemini-omni、wan3.0、seedance-2.5。3.0 系列的官方发布精确日期未拿到权威源,指标日期只按可核验月份记 2026-09。闭源、只走厂商接口;未做基准复现,置信度记 C。

3.0 / Omni / Turbo当前旗舰系列厂商宣称 · 2026-09
产品快手 Kuaishou官网
可灵 3.0 系列:音频原生进模型、画面到 4K,参数化镜头语言仍是它的护城河
视频生成影音创作梯顶C

Wan 万相:视频生成侧的开放权重基线,让整个生态能在自己机器上迭代

阿里通义万相把视频生成模型以 Apache-2.0 放出权重,是视频域里最重要的公共基线。它的价值与闭源服务不同:不在于「今天出片最好看」,而在于可微调、可复现、可在自己的推理栈上跑——LoRA、ControlNet 式条件控制、量化加速、蒸馏少步数这一整套生态工作都围绕它展开。对情报站来说,一个开放权重基线意味着「视频生成现在能做到什么」这个问题第一次有了可以自己验证的参照系,而不必相信厂商精选样本。许可与仓库公开这两条已核验,画质与物理表现仍是 C 级厂商口径。

Apache-2.0开放权重许可厂商宣称 · 2025-07
产品阿里巴巴通义 Alibaba Tongyi官网Repo
Wan 万相:视频生成侧的开放权重基线,让整个生态能在自己机器上迭代
3D 与世界模型游戏制作梯顶C

Meshy 7:把「生成之后」接完的 3D 资产平台——拓扑、PBR、绑定、打印可行性与 MCP 一条链

Meshy 的主打是 Meshy 7(2026)的「true-to-reference」——生成结果与输入参考图的对齐度,官方称单图转 3D 一分钟内。它真正的差异点不在生成,而在把生成之后的工程约束接完:Smart Topology 约 10 秒给可控面数的干净拓扑、一键 PBR 全套(albedo/normal/metallic/roughness,HD 4K)不需搭 shader、人形与四足自动绑定配 600+ 动作预设、打印侧生成即 watertight 且导出前自动修复,导出 GLB/FBX/OBJ/STL/USDZ/3MF 直连 OrcaSlicer 与 Bambu Studio。给 agent 的入口也齐:REST API 覆盖每项生成能力、MCP server 可接进 Claude/Cursor、CLI 一条命令出成品。规模口径 100M+ 模型 / 12M+ 用户,免费档 100 credits/月。边界:无公开量化基准(质量星级是自评)、credits 单价与档位关系未公开、「一分钟内」不含后处理。

<1min官方宣称:单图 → 3D 模型厂商宣称 · 2026
产品Meshy官网
Meshy 7:把「生成之后」接完的 3D 资产平台——拓扑、PBR、绑定、打印可行性与 MCP 一条链

作为亚马逊联盟会员,我们可能从符合条件的购买中获得佣金。