Skip to content
←返回领域赋能

能力资产

视频生成影音创作梯顶

Wan 万相:视频生成侧的开放权重基线,让整个生态能在自己机器上迭代

wan

阿里通义万相把视频生成模型以 Apache-2.0 放出权重,是视频域里最重要的公共基线。它的价值与闭源服务不同:不在于「今天出片最好看」,而在于可微调、可复现、可在自己的推理栈上跑——LoRA、ControlNet 式条件控制、量化加速、蒸馏少步数这一整套生态工作都围绕它展开。对情报站来说,一个开放权重基线意味着「视频生成现在能做到什么」这个问题第一次有了可以自己验证的参照系,而不必相信厂商精选样本。许可与仓库公开这两条已核验,画质与物理表现仍是 C 级厂商口径。

C
置信度
厂商宣称
只有官方模型卡/发布会,无独立复测
Apache-2.0
关键指标
开放权重许可
厂商宣称 · 2025-07
成熟度
产品
研究 → 演示 → 产品 → 生产
编辑判断

Wan 在这条阶梯上的身份是公共参照系,不是「最强出片工具」。这个区别很重要:视频生成域的闭源产品彼此无法公平比较(各家只放精选样本、提示词与采样参数都不公开),而一个 Apache-2.0 的开放权重模型可以被任何人在同一套硬件、同一批提示词下跑,于是它成了社区事实上的对照组——新的加速方法、条件控制方法、蒸馏方法,几乎都要在它身上证明有效。

可核验的 A 级事实:仓库公开、许可为 Apache-2.0(GitHub API 已确认)。属于 C 级的:官方给出的画质、运动幅度、物理合理性宣称——没有自托管跑过同一批提示词的对照,所以不作为结论。

需要如实写清的门槛:自托管视频模型的显存与时间成本远高于图像。这不是「下载权重就能用」的场景,批量生产要么用量化与少步蒸馏换质量,要么付云服务的时间成本。把它当基线用于研究和方法验证是合适的,把它当生产工具则需要先算清单位成本。

视频生成Open Weights扩散Transformer阿里
阿里巴巴通义 Alibaba Tongyi官网github.com/Wan-Video/Wan2.21 min read740

为什么开放权重在视频域比在图像域更重要

图像域的开放权重生态已经很成熟,闭源服务与开放模型之间的质量差距小到多数生产场景感知不出。视频域相反:闭源产品的样本与开放权重的实际表现差距仍然明显,而且没有第三方能公平验证——你无法在闭源服务上跑自己的对照实验,只能相信厂商放出来的那几十段精选。这种信息不对称在视频域造成的实际后果是:团队按 demo 立项,做到一半发现真实水位差得远。

一个 Apache-2.0 的视频基线打破了这一点。任何人都可以在自己的硬件上,用自己的提示词,得到自己的真实读数。这对情报站尤其关键:本站对视频域结论普遍标 C,不是因为悲观,而是因为缺少可复现的对照——开放权重是唯一能把它升到 B/A 的路径。

围绕它长出来的生态

  • 条件控制:参考图像、姿态、深度、边缘图作为额外输入,把「怎么动」的自由度收窄到可控范围。这是从抽卡走向调度的关键一层。
  • 少步蒸馏与加速:把几十步采样压到几步,时间成本降一个量级,代价是细节与运动连贯性的损失——这是当前最活跃的方向。
  • 风格 LoRA:与图像域同源的微调路径,让特定美术风格可复用。视频 LoRA 的训练成本远高于图像,所以数量少但价值高。
  • 推理优化:显存分块、序列并行、量化,把「只能在大集群上跑」变成「单卡工作站能跑短片段」。

自托管的真实成本账

环节成本性质说明
显存硬门槛视频模型的激活与 KV 显存远高于图像;分辨率与帧数是平方级放大
单条生成时间线性成本数十步采样 × 每步全序列注意力,单条 5 秒片段常要数分钟
重 roll 次数乘数生产场景三到十次是常态,时间成本要按这个倍数算
蒸馏/量化一次性投入换来数量级的时间下降,代价是质量损失,需要自己验证能接受
存储与传输易被忽略视频文件比图像大两到三个数量级,批量生产的落盘与 CDN 成本不可忽略

边界与失败模式

  • 开放权重不等于开放能力上限:厂商通常把最强档位留在闭源服务里,开放的是能力子集。拿开放基线的表现推断该团队的真实水位会低估。
  • 物理与时序一致性:与整个视频域同样的问题——流体、碰撞、物体守恒、长时序身份保持都不可靠,越长的片段越明显。
  • 提示词敏感性:开放权重模型没有闭源产品那层提示词重写与优化,自然语言描述的质量直接决定输出质量,同样的意思换一种写法结果差别很大。
  • 许可细节要读:Apache-2.0 覆盖代码与权重,但商用时的输出内容合规、训练数据来源声明是另一层,团队落地前需要法务确认。

待核验清单(我们下一步做什么)

这条要升到 B/A,路径很清楚也很重:在一台固定的机器上用固定的一批提示词,把 Wan 的开放档位与两到三家闭源服务的输出放在一起,盲评时序一致性、运动幅度与物理合理性;记录单条的显存峰值与墙钟时间;跑一遍少步蒸馏版本,量化质量损失。这是我们视频域唯一一条可能拿到 A 级读数的资产,优先级最高,但需要专门的算力预算。

同域资产:视频生成

4
视频生成影音创作梯顶A

Gemini Omni:视频交付单位从「一次抽卡」变成「一段可对话的编辑过程」

Google DeepMind 的视频与多模态生成模型,官方定位 create anything from any input, starting with video:逐步对话编辑视频,每次编辑建立在上一次之上并维持连贯场景,交付单位从一个镜头提到可改素材;另两条:真实世界知识、任意参考合成单一输出。水位连票数读:Artificial Analysis 竞技场(2026-09-22)文生视频榜 gemini-omni-1.1-flash 以 Elo 1516 第 1,但只有 1,784 票、CI ±15;第 2 同门 1513、26,576 票、±9,3 分差远小于各自 CI,统计不可区分,即 Omni 系列并列榜首。图生视频榜第 1 是 minimax-h3(1495、57,112 票),Omni 以 1488、3,734 票第 2。定价:输入 $1.50/1M tokens,输出文本 $9.00/1M、视频 $17.50/1M,720p 约 $0.10/秒、30 秒约 $3。付费层 GA、免费层无。闭源不可自托管、不能微调。置信度 A(已确认),视频域首条 A 档;A 指读数可信可核,不等于无争议第一。

1516Arena T2V Elo(1784 票)已确认 · 2026-09
产品Google DeepMind官网
Gemini Omni:视频交付单位从「一次抽卡」变成「一段可对话的编辑过程」
视频生成影音创作梯顶C

可灵 3.0 系列:音频原生进模型、画面到 4K,参数化镜头语言仍是它的护城河

快手可灵是国内最早把视频生成推到「能接商业单」水位的一条主线,长期强项不在纯文生视频,而在图生视频与运镜控制:先由图像环节锁定构图与角色,再让视频模型在确定的关键帧上补间,配合首尾帧约束与推/拉/摇/移/环绕/跟随的镜头参数,做出可预测的短片段。3.0 系列(官方 release-note 横幅:全面开放 API)带来三处实质跃迁——音频原生进模型(5/10/12 秒音频档)、图像与视频原生 2K/4K、智能分镜与元素参考把多镜头连贯从剪辑问题变成模型可控问题;型号分工为 3.0 / 3.0 Omni / 3.0 Turbo、Kling Image 3.0 与 -omni、Native 4K Video、Motion Control。竞技场水位说实话:图生视频 kling-v3-pro 第 19(Elo 1354),前面是 MiniMax h3、gemini-omni、wan3.0、seedance-2.5。3.0 系列的官方发布精确日期未拿到权威源,指标日期只按可核验月份记 2026-09。闭源、只走厂商接口;未做基准复现,置信度记 C。

3.0 / Omni / Turbo当前旗舰系列厂商宣称 · 2026-09
产品快手 Kuaishou官网
可灵 3.0 系列:音频原生进模型、画面到 4K,参数化镜头语言仍是它的护城河
图像生成设计与前端梯顶C

FLUX:把图像生成从「出图」推进到「可控编辑 + 开放权重」的那条主线

Black Forest Labs 的 FLUX 家族用整流流(rectified flow)Transformer 做图像生成,并放出 Apache-2.0 的 dev 档权重,是开源侧最重要的图像基线;Kontext 一档把「按指令改这张图的局部而不动其余」做成了可用能力。采集库里另有 FLUX 3 的发布记录,厂商把它定位成统一图像/视频/音频的世界模型,这一主张记为待核验。

Apache-2.0开放权重档位(dev)厂商宣称 · 2024-08
产品Black Forest Labs官网Repo
FLUX:把图像生成从「出图」推进到「可控编辑 + 开放权重」的那条主线
视频生成影音创作梯顶C

Seedance 2.5:把视频交付单位从「一个镜头」提到「30 秒叙事」

字节 Seed 的视频生成主线。1.x 是文生/图生的静音短镜头,2.0 起换成统一多模态音视频联合生成架构(文本/图像/音频/视频四类输入),2.5 把交付单位直接提到 30 秒一段叙事,并支持再续写两次、白模控制、绿幕编辑、专业运镜与表演调度。第三方水位是它最硬的地方:Artificial Analysis 竞技场(2026-09-22)图生视频 dreamina-seedance-2.5-720p 第 4(Elo 1477),文生视频 2.0 第 5(1479)、2.5 第 7(1474)。闭源,只走 Dreamina / 火山引擎 / BytePlus,不能自托管与微调;SeedVideoBench-2.0 是内部评测,无法独立复现。未做基准复现,置信度记 C(厂商宣称)。

30s单次生成叙事时长厂商宣称 · 2026-09
产品ByteDance Seed官网
Seedance 2.5:把视频交付单位从「一个镜头」提到「30 秒叙事」

作为亚马逊联盟会员,我们可能从符合条件的购买中获得佣金。