Skip to content
←返回领域赋能

能力资产

图像生成设计与前端梯顶

Nano Banana Pro:把「聊天式改图」做成产品形态的图像编辑模型

nano-banana-pro

Gemini 的原生图像生成与编辑一档,社区叫它 Nano Banana。它的关键不是画质峰值,而是交互形态:多轮对话里持续改同一张图、能读图里的文字再改、能把多张参考图合成一张。这让图像生成第一次像「和设计师对话」而不是「抽卡」。它的排名多来自偏好竞技场,那是投票不是测量,记为待复现。

D
置信度
待复现
单一来源,尚未独立验证
成熟度
产品
研究 → 演示 → 产品 → 生产
编辑判断

评为 D 档(待复现),这不是贬低,而是把话说清楚:它的名声主要来自偏好竞技场——大量用户对两张图投票。竞技场能很好地回答「哪张更讨人喜欢」,不能回答「哪张在你要的规格上更准」。而设计生产要的恰恰是后者:文字对不对、产品比例准不准、改一处有没有动别处。

就交互形态而言,它是这一档里最有影响力的一个:多轮连续编辑、读图内文字、多图融合这三件事,把图像生成从「一次性出图」变成了「可迭代的工作对象」。这个变化比任何一次画质提升都更贴近 AGI 的方向——它意味着模型开始持有对一个工件的持续状态,而不是每次重新抽卡。

它同时是闭源、只走厂商接口的一档,所以无法自托管、无法微调、无法离线复现。对需要数据不出域的团队,这是硬边界。

Image GenerationImage EditingInstruction Following多模态
Google DeepMind (Gemini image)官网1 min read806

为什么「对话式编辑」是一个能力台阶

文生图的原始形态是无状态的:提示词进、图出,不满意就重来。要在同一张图上做第二次修改,你得把上一张当参考图重新喂进去,并且祈祷其余部分别变。这条路很快撞到两个墙——身份漂移(改一次脸就变一次)与全局扰动(改一处,整张图的色调与细节都被重算)。

对话式编辑把这两件事变成了产品要求:模型需要在一个会话里维持对同一工件的理解,并且把修改限制在被要求的范围内。这不是提示词技巧能解决的,它要求生成端与理解端在同一个模型里闭环——这也是它挂在 image 与 multimodal 两个能力域下的原因。

真正拉开差距的三件事

  • 读图内文字再改:海报、包装、界面上的文字先被理解、再被重排,而不是当成纹理去猜。这让「改文案」第一次成为一个可靠操作。
  • 多参考图融合:把产品图、场景图、风格图分别给进去,输出一张同时满足三者的合成图。这是电商与广告的真实工作流形态。
  • 多轮连续修改:第 5 轮的修改仍然记得第 1 轮定下的东西。会话越长,工件越接近可交付。

边界与失败模式

  • 精确尺寸与比例:它不持有工程语义,「按 1:1 还原这个包装尺寸」这类要求仍会给出视觉合理但尺寸错误的结果。
  • 长文本排版:短标题与标签可靠,整段正文的排版仍应交给专业排版工具。
  • 会话越长越漂:多轮之后累积的微小改动会偏离最初意图,需要阶段性地「回到干净版本」。
  • 不可自托管:数据必须出域;合规敏感的场景直接排除。
  • 评测证据的性质:现有排名以偏好投票为主,缺少按规格判定的第三方测量。这正是我们记 D 档的原因,也是我们要补的复现工作。

我们的复现口径(将要发布的测量)

计划用三组固定任务测它,而不是继续引用竞技场名次:其一,文字保真——给一张含中英文混排的海报,只改一行文案,测其余文字的字形错误率;其二,影响半径——只改指定区域,测区域外像素的变化率;其三,身份保持——同一主体连续五轮编辑后,测与首图的可识别一致性。这三项跑完,这条记录才会升档。

同域资产:图像生成

4
图像生成设计与前端梯顶C

Qwen-Image-2.1:一套开放权重同时做生成、局部编辑与透明输出

阿里 Qwen 的图像生成与编辑一档,把文生图、局部编辑(圈选/涂抹/独立 mask)、最多 10 张参考图融合与原生 RGBA 透明输出收进同一个 7B 视觉生成组件(32 层 Single-Stream DiT),并用混合粒度注意力与前缀 KV 缓存复用压低批量出图的边际成本;原生 2048px、7 档宽高比。它是当前可下载权重里图像竞技场排位最靠前的一档(文生图第 17 / Elo 1228,图像编辑第 16 / 1367),但许可是 Qwen Research License 而非 Apache-2.0,商用前必须单独读条款,diffusers 还需从 git 主干安装。未做基准复现,置信度记 C(厂商宣称)。

7B视觉生成组件参数厂商宣称 · 2026-09
产品阿里 Qwen (Alibaba)官网Repo
Qwen-Image-2.1:一套开放权重同时做生成、局部编辑与透明输出
视频生成影音创作梯顶C

可灵 3.0 系列:音频原生进模型、画面到 4K,参数化镜头语言仍是它的护城河

快手可灵是国内最早把视频生成推到「能接商业单」水位的一条主线,长期强项不在纯文生视频,而在图生视频与运镜控制:先由图像环节锁定构图与角色,再让视频模型在确定的关键帧上补间,配合首尾帧约束与推/拉/摇/移/环绕/跟随的镜头参数,做出可预测的短片段。3.0 系列(官方 release-note 横幅:全面开放 API)带来三处实质跃迁——音频原生进模型(5/10/12 秒音频档)、图像与视频原生 2K/4K、智能分镜与元素参考把多镜头连贯从剪辑问题变成模型可控问题;型号分工为 3.0 / 3.0 Omni / 3.0 Turbo、Kling Image 3.0 与 -omni、Native 4K Video、Motion Control。竞技场水位说实话:图生视频 kling-v3-pro 第 19(Elo 1354),前面是 MiniMax h3、gemini-omni、wan3.0、seedance-2.5。3.0 系列的官方发布精确日期未拿到权威源,指标日期只按可核验月份记 2026-09。闭源、只走厂商接口;未做基准复现,置信度记 C。

3.0 / Omni / Turbo当前旗舰系列厂商宣称 · 2026-09
产品快手 Kuaishou官网
可灵 3.0 系列:音频原生进模型、画面到 4K,参数化镜头语言仍是它的护城河
视频生成影音创作梯顶C

Wan 万相:视频生成侧的开放权重基线,让整个生态能在自己机器上迭代

阿里通义万相把视频生成模型以 Apache-2.0 放出权重,是视频域里最重要的公共基线。它的价值与闭源服务不同:不在于「今天出片最好看」,而在于可微调、可复现、可在自己的推理栈上跑——LoRA、ControlNet 式条件控制、量化加速、蒸馏少步数这一整套生态工作都围绕它展开。对情报站来说,一个开放权重基线意味着「视频生成现在能做到什么」这个问题第一次有了可以自己验证的参照系,而不必相信厂商精选样本。许可与仓库公开这两条已核验,画质与物理表现仍是 C 级厂商口径。

Apache-2.0开放权重许可厂商宣称 · 2025-07
产品阿里巴巴通义 Alibaba Tongyi官网Repo
Wan 万相:视频生成侧的开放权重基线,让整个生态能在自己机器上迭代
图像生成设计与前端梯顶C

FLUX:把图像生成从「出图」推进到「可控编辑 + 开放权重」的那条主线

Black Forest Labs 的 FLUX 家族用整流流(rectified flow)Transformer 做图像生成,并放出 Apache-2.0 的 dev 档权重,是开源侧最重要的图像基线;Kontext 一档把「按指令改这张图的局部而不动其余」做成了可用能力。采集库里另有 FLUX 3 的发布记录,厂商把它定位成统一图像/视频/音频的世界模型,这一主张记为待核验。

Apache-2.0开放权重档位(dev)厂商宣称 · 2024-08
产品Black Forest Labs官网Repo
FLUX:把图像生成从「出图」推进到「可控编辑 + 开放权重」的那条主线

作为亚马逊联盟会员,我们可能从符合条件的购买中获得佣金。