H3 加速竞技场:MiniMax H3 加速方案的盲测排名

ComfyUI Wikinews

一个来自 ComfyUI 社区的盲测 A/B 竞技场,对 23 个 MiniMax H3 加速变体进行排名:FastH3、H3 Turbo 蒸馏、SLA、PDD 及合并模型,基于 4000 个预生成片段的投票。

H3 Acceleration Arena

H3 加速竞技场对不同 MiniMax H3 加速变体的预生成片段进行盲测 A/B 投票。

一个竞技场,涵盖所有 H3 加速方案

过去一个月,MiniMax H3 加速场景呈现爆发式增长:蒸馏 LoRA、合并模型、缓存节点和注意力内核如今都在争夺关注度,而大多数宣称都建立在自报基准之上。由 Hugging Face 的 multimodalart 与社区基准测试者共同构建的 H3 加速竞技场,用盲测两两投票取代了这些宣称。使用不同加速变体、由相同提示词和种子生成的两个片段并排播放,观众选出更好的一个,Elo 与 Bradley-Terry 评分累积成带置信区间的公开排行榜。

当前语料库涵盖200 个提示词集合上的 23 个已评分变体,约 4000 个预生成片段,分为四个部分:文生视频视觉、文生视频音频、图生视频视觉和图生视频音频。由于 H3 会同时生成音频和视频,竞技场会单独对声音质量进行评分,而不是让快速的视觉模型仅凭画面取胜。

评分池中有哪些变体

评分池涵盖了我们单独介绍过的大部分方案:

变体类别竞技场中的示例
蒸馏模型FastVideo FastH3 Preview v0.2 和 v1(4 步和 6 步配置)
Turbo 蒸馏 LoRALightX2V H3-Turbo 4 步/8 步 v0.1 至 v1.1,larryvrH Turbo 4 步 EMA,joyfox FL2VA 4 步
NPU 原生蒸馏Beidouqixing FlashGen 4 步,在 Ascend NPU 上无数据训练
合并实验silveroxides DARE-TIES 以及 4 步到 8 步 DARE 合并
缓存与路由Tutu AudioVideo 20 步到 8 步 NFE 模型,mvp-lab RAVEN 流式预览
托管参考通过 fal 托管的 MiniMax H3-Max,作为质量锚点
基线28 步 MiniMax-H3 基础模型,锚定于 Elo 1000

其中许多是社区 LoRA,此前从未在相同提示词下正面交锋,因此这个竞技场是 H3 加速生态中首次的同类对比。

并非所有内容都能通过质量控制

竞技场的方法论对存在缺陷的变体异常严格。十五个参赛项已从投票中撤回并公布了原因,包括 FastVideo 完整模型(其 VSA 门控张量会被 diffusers 加载器静默丢弃,产生「模糊糊状」画面,这会不公平地惩罚作者)、一个追溯到已确认上游缺陷的 Silveroxides 合并,以及被更正后重跑所取代的 LightX2V SLA 运行。FastVideo 训练最充分的合成数据参赛项被搁置纯粹是为了加快评分收敛,而不是因为它有缺陷。

投票完整性也受到同等重视:必须通过 Hugging Face OAuth 登录,每次投票都归属于一个稳定的用户 ID,片段以不透明令牌形式提供,因此在投票之前,变体名称绝不会泄露。Elo 以 28 步基线锚定在 1000,置信区间来自自举重采样加顺序重排,因为作者发现朴素排列区间恰恰在数据最稀疏时变得更窄。

当前状态

排行榜数据目前处于隐藏状态,直到 Space 的可见性切换为公开,但竞技场应用本身已上线并运行:其统计数据端点报告了 200 个可配对提示词、23 个可配对变体和 4000 个片段的语料库,投票 API 也能正常响应。宣布这一消息的 Reddit 帖子将该项目描述为「15+ 个 H3 LoRA、微调模型、Max」同台竞技,该公告当天登上了 r/StableDiffusion 和 r/comfyui 的榜首。一旦评分公开,这将成为选择安装哪种 H3 加速方案的参考榜单,同时也能确定众多 Turbo LoRA 模型中哪些值得保留。

评论

使用 GitHub 登录后即可参与讨论。

评论加载中…
H3 加速竞技场:MiniMax H3 加速方案的盲测排名 | ComfyUI Wiki