HyperFlow H3 Flash:高速生成同步影片與立體聲音

HyperFlow H3 Flash 把影片和同步立體聲音效一併生成,並以較少採樣步數及量化版本,讓消費級 RTX 顯示卡也能執行短片生成。

Repository image for Video-Rebirth/hyperflow-h3-flash

由文字提示生成影片時,HyperFlow H3 Flash 可同時產生同步的 32 kHz 立體聲音效;輸出長度為 5.2 至 15 秒,預設解像度 1344×768、每秒 24 格。它是 Video Rebirth 將 MiniMax-H3 壓縮並改為少步採樣的影片生成模型,適合快速製作帶聲短片。

模型支援三類任務:t2va 由文字生成影片;fl2va 可配合首格,或首尾兩格畫面生成;ref2va 則可參考最多 12 個素材。ref2va 在 GGUF 版本只支援圖片,Python INT8 convrot 版本則支援圖片、影片和音訊,兩種執行方式的素材範圍並不相同。

系統記憶體不多於 64 GB 的個人電腦適合使用 GGUF,並可透過 ComfyUI、Unsloth Studio 或 stable-diffusion.cpp 執行;資料中心 GPU,或配備至少 69 GiB 系統記憶體的 24 GB 以上 RTX 顯示卡,則可選 Python INT8 convrot。項目亦提供 ComfyUI 範本及 GGUF 設定指南。

模型有 4、6 或 8 步採樣,預設 6 步,而且不使用 classifier-free guidance(CFG)。在生成 5.2 秒影片的測試中,4 張 B200 用時 8.7 秒,單張 H200 用時 36 秒,單張 RTX 5090 用時 92 秒;NVIDIA SOL-H3 則支援在 4 張 B 系列 GPU 上即時執行。

模型約有 13.7B 至 13.9B 參數,不到 MiniMax-H3 約 31B 參數的一半;GGUF 的 Q4_K_M 約佔 9.1 GB,可在 24 GB 或 32 GB GPU、搭配 16 GB 系統記憶體的電腦執行,但尚未測試 16 GB GPU。使用時可按任務選擇文字、首尾畫面或參考素材,再依記憶體和 GPU 選 GGUF 或 INT8;追求較快生成則需考慮多卡配置。

  • 同步生成影片與立體聲音效,片長為 5.2 至 15 秒。
  • GGUF 較適合系統記憶體不多於 64 GB 的個人電腦。
  • INT8 convrot 支援更多 ref2va 素材類型,但記憶體需求較高。
  • 生成速度受 GPU 數量和型號影響;16 GB GPU 尚未測試。

GitHub · 模型

Categories: 開源, ComfyUI, AI productions, 模型, NVIDIA, Video, Image, Audio, Content Creator, MiniMax
MiniMax H3