Model
.ai
追蹤開放 AI 模型

AI 影片生成入門:從圖片到影片、文字到影片,以及使用 Wan、LTX-2 和 H3 製作第一支片段

主題:影片模型
作者:Lookout
發佈於 2026年4月29日

概述

影片模型其實是多了時間軸的圖片模型:同一個去噪循環會同時處理一組幀,所以你對提示詞、種子和去噪的認識都能用上,成本也會乘以幀數。對新手來說,實際影響有三點。先從圖片到影片(I2V)開始,因為一張好的靜態圖已經確定了構圖和風格,影片模型只要負責動作。保持短片長度(約五秒),因為模型就是這樣訓練的。除非你有 24 GB 顯卡,否則大型模型建議用雲端。
2026 年有三個開放模型家族幾乎能滿足所有需求。Wan 2.2(阿里巴巴)是全能型:5B 模型可在 12-16 GB 運行,14B 雙專家模型品質最佳,還有龐大的 LoRA 生態系統支援動作和風格。LTX-2(Lightricks)速度快且能生成同步音訊,但需要 24-32 GB。MiniMax H3 是帶對話和音效的影音模型,主要透過托管流程使用;本站 Mark White 的 H3 提示詞指南有深入介紹。Hunyuan Video 1.5 是 Wan 14B 的輕量替代方案。
目錄列出每個影片模型及其 LoRA,標明基礎模型和大小(5B 或 14B,高噪音或低噪音專家),模型頁面展示示例片段和提示詞。點擊執行按鈕可在 PirateDiffusion 上開啟模型,透過工作流程指令從回覆的圖片生成影片,或在 BitVector 上使用。

參考

名稱
類型
含義
I2V (image to video)
mode
讓靜態圖動起來。最適合新手的模式:構圖已經對,提示詞只描述動作。
T2V (text to video)
mode
只靠提示詞生成。變化多但控制少;適合找靈感和 B-roll。
FLF2V / first-last frame
mode
兩個關鍵幀,模型補間中間動作。轉場可控。
Frames and fps
setting
Wan:81 幀,16 fps(5 秒);LTX-2:97-121 幀,24-25 fps;H3:約 24 fps,145 幀。記憶體用量隨幀數增加。
Resolution
setting
Wan 2.2:832x480 或 480x832(快速),1280x720(需 24 GB 以上);LTX-2 最高可達 1080p+,需 32 GB。人物用直向,場景用橫向。
Motion prompt
prompt
一個主體動作加一個鏡頭動作:"她轉向窗戶並微笑;慢慢推近"。避免列出圖片已有的場景細節。
Steps / CFG / shift
setting
Wan 2.2 14B:20 步,兩個專家各 10 步,CFG 3.5,shift 5;5B:20-30 步,CFG 5;LTX-2:25-30 步,使用自訂排程;蒸餾 LoRA(lightx2v)讓 Wan 只需 4-8 步,CFG 1。
Motion LoRAs
file
鏡頭移動、舞蹈、手勢、物理效果;對應 5B/14B 和專家。這裡的頁面會標明目標。
Interpolation and upscale
post
用 RIFE 或 FILM 插幀到 32-60 fps;用 ESRGAN 或 SeedVR 提升解析度。

逐步操作

  1. 製作或挑選一張靜態圖:1024x1024 或 832x1216,主體清楚、背景簡單。臉部佔畫面超過十分之一效果最好。
  2. 打開本站 Wan 2.2 I2V 模型頁,複製示例動作提示詞格式,按執行按鈕(PirateDiffusion:用 /workflow 指令回覆圖片;BitVector:上傳並選擇模型)。
  3. 寫一個動作提示詞,一句描述主體動作,一句描述鏡頭動作。不用提衣服、顏色或光線,圖片裡已經有了。
  4. 生成 832x480(橫向)或 480x832(直向),81 幀,預設步數。看完整片,評估動作,不是銳利度。
  5. 只調整動作提示詞:用較慢的動詞("慢慢地"、"輕輕地")能減少亂動;只給一個鏡頭指令避免跳動。
  6. 本地用 16 GB 顯卡:Wan 2.2 5B fp8 或 GGUF,832x480,49-81 幀,文字編碼器用 CPU。24 GB 顯卡:14B fp8 480p,720p 可關閉編碼器。參考 AI 影片 VRAM 指南。
  7. 長片段:用第一段最後一幀當第二段起始圖,動作提示詞連續;用剪輯軟體接合;最後插幀到 30 fps 並升解析度。
  8. 加音效:LTX-2 和 H3 可同步生成音訊;Wan 則在剪輯軟體加音樂或特效。

範例

I2V 動作提示詞

Positive: she lifts the coffee cup, takes a sip and looks out of the window; slow push-in, shallow depth of field, natural motion
Negative (Wan): static, blurry, distorted face, extra fingers, jump cut, text

PirateDiffusion 工作流程指令

/workflow /run:wan22-i2v she lifts the coffee cup and looks out of the window, slow push-in /length:81 (as a reply to the still)

ComfyUI Wan 2.2 5B 在 16 GB 顯卡上

UnetLoaderGGUF wan2.2_ti2v_5B_Q8_0 | CLIPLoader umt5_xxl_fp8 (cpu) | Wan VAE 2.2 | WanImageToVideo 832x480, 81 frames | KSampler 24 steps, cfg 5, uni_pc, simple | VAE Decode (Tiled)

技巧

  • 動作動詞比形容詞重要:"轉身、走路、舉起、倒、揮手" 都會產生明確動作;"美麗、電影感" 不會。
  • 每段影片只用一個鏡頭動作:推近、拉遠、向左平移、環繞。兩個動作會造成畫面抖動。
  • 直向靜態圖更適合臉部動畫;橫向靜態圖更適合環境動畫。
  • Wan 高噪音專家 LoRA 影響動作;低噪音專家 LoRA 影響細節。很多套件兩種都有,分別載入對應專家。
  • 蒸餾 LoRA(lightx2v、FastWan)能把 Wan 從 20 步降到 4-6 步,CFG 1,畫質損失很小;模型頁有列出。
  • Wan 14B 在 4090 顯卡上每段約 3-10 分鐘,LTX-2 約 90 秒;雲端大多一兩分鐘回片。

問題排解

影片像靜止但有輕微閃爍

原因
提示詞沒動作動詞,或靜態 LoRA 權重太高。

修復方法
加主體動作和鏡頭動作;把 LoRA 權重降到 0.7。

臉部變形或身份改變

原因
臉太小、幀數太多,或 480p 下細節臉部。

修復方法
裁剪更近,幀數 49-61,或用雲端 720p;最後手段是每幀用臉部細節強化。

鏡頭跳動或場景切換

原因
提示詞有兩個鏡頭指令,或有「cut to」字眼。

修復方法
只用一個鏡頭動作;把「jump cut」放到負面提示詞。

720p 時顯存不足

原因
幀數乘解析度超出顯存。

修復方法
降到 480p 或減少幀數,文字編碼器改用外掛;參考 AI 影片 VRAM 指南。

動作 LoRA 沒作用

原因
載錯專家或模型大小。

修復方法
看模型頁確認 5B/14B 和高/低噪音,依觸發詞載入。

常見問題

先用哪個影片模型?

Wan 2.2 I2V:容錯高、文件齊全、LoRA 最多。Wan 入門指南有完整設定。

8 GB 顯卡能用嗎?

用 Wan 2.1 1.3B 或 Wan 2.2 5B GGUF 慢慢做短 480p 片段。實際上建議先用雲端。

怎麼弄音效?

LTX-2 和 MiniMax H3 可生成同步音訊;Mark White 的 H3 提示詞指南有對話和特效說明。

片段能多長?

原生約五秒。長片是串接多段;超過六到八秒品質會下降。

最新商業模型(Veo、Kling、Wan 3.0)能本地用嗎?

不能,只能用 API。本指南裡的都是開放權重,可本地或雲端運行。

本指南涉及的模型

作者
坐在瞭望台刷新 Hugging Face,讓你不用自己刷新。新模型一上架就報告,修正配置悄悄重傳時也會報告。從未早到過。比起發布影片更相信授權檔案。
Lookout 的所有指南

更多指南