MiniMax H3

除文字外亦可以連同圖片、影片甚至音訊一齊交畀模型處理;MiniMax H3就是朝住呢種工作流而設。頁面未提供 based on、base model 或 fine-tuned from 資訊,所以無法確認它係唔係建基於其他基礎模型微調而成,但已清楚標示為 image-text-to-video,而且屬於可同時理解同生成多模態內容的 generative system。
它處理的重點是把 text、images、video、audio 放入同一個上下文,再輸出最長 15 秒、最短 4 秒、可到 2K 的影片,並且附帶 native stereo audio。呢種設計的價值,在於畫面、聲音同指令可以一齊對齊,適合做 image-to-video、video-to-video、text-to-audio-video 以至 reference-to-audio-video 等任務,減少要分開串接多個模型的工序。
H3 是 task-generalization-oriented system,意思是模型在 pre-training 階段已經針對廣泛任務泛化而設計,唔係只為單一路徑生成。它強調 unified understanding of multimodal contexts,同時支援多種輸入來源與輸出規格;比例覆蓋 21:9、16:9、4:3、1:1、3:4、9:16 等常見格式,短邊預設 768 像素,最高可到 2K,反映它偏向面向內容製作與跨媒體生成,而不只是研究展示。
- 支援 text-to-video、image-to-video、video-to-video,同時覆蓋 audio-video-generation
- 可生成 4 至 15 秒影片,並輸出 native stereo audio
- 輸入上下文可混合 text、images、video、audio,屬於 omni-modal 路線
- Hugging Face 頁面標示
library_name: diffusers,代表可沿用 diffusers 生態整合
官方網站
video-to-h3-prompt SKILL:逐幀反推參考影片,自動生成可貼即用 H3 提示詞
項目把『看幾幀就寫 vibe』的拍腦袋流程,換成五通道取證管線:密集抽幀、音頻交叉驗證、因果事件鏈、剪輯層分離,最後產出對應 MiniMax H3 五種輸入模式的完整模板。
ComfyUI-MiniMaxH3-TimelineDirector:一張圖跑出無斷點長影片
想在 ComfyUI 內一次過生成超過一分鐘的影片,又要角色口型與背景音樂全程對得齊?這套 MiniMax H3 Timeline Director 插件把分段、續接、漂移修正全部收埋喺一張圖。
ComfyUI-MiniMaxH3Mod:可重用參考模組
你可以把它理解成 MiniMax H3 的參考素材管理層,把圖像、影片和聲音整理成可重用的 RefMod。
H3 外掛
| 項目 | 網址 |
|---|---|
| comfyui-SelfLift | https://github.com/facok/comfyui-SelfLift |
| Multishot-Workflow | https://huggingface.co/LaDruid/MiniMax-H3-Multishot-Workflow |
| LoRA - a little more sharpness | https://huggingface.co/Alissonerdx/Minimax-H3-ComfyUI |
| Semantic-Bridge | https://huggingface.co/speach1sdef178/MiniMax-H3-Semantic-Bridge |
| ComfyUI 工作流合集 2 | https://huggingface.co/datasets/stablediffusiontutorials/Minimax-H3/tree/main |
| ComfyUI 工作流合集 1 | https://huggingface.co/javawock7618/comfy-MiniMax-H3-workflows |
| better-human-motion-h3-lora | https://huggingface.co/vpakarinen/better-human-motion-h3-lora |
| H3VAE_TRT 加速 1.7X | https://github.com/lihaoyun6/ComfyUI-H3VAE_TRT |
| 時間線導演台 | https://youtu.be/efzHY7cr9XA?si=Di-ezdLQ-ukx-fXm |
| Speed LoRA | |
|---|---|
| Open-H3-Regenerate-2K(NVidia) | https://nvlabs.github.io/Sana/Open-H3-Regenerate-2K/ |
| Veda Attention 教學 | https://www.youtube.com/watch?v=bs7WQKv4_ZU |
| FastVideo FastH3 | https://huggingface.co/FastVideo/FastVideo-FastH3-Comfy |
| Minimax-h3-Turbo | https://huggingface.co/lightx2v/Minimax-h3-Turbo |
| Fused Turbo (INT8 ConvRot) | https://huggingface.co/MATLOWAI/minimax-h3-fused-turbo-int8-convrot |
| TaoMate-H3 3 步加速(Alibaba) | https://github.com/TaoLiveAIGC/TaoMate-H3 |
| 無審查! 8GB VRAM,INT8 加速高品質 | https://www.youtube.com/watch?v=aJydWxn2zRk |