目錄

ComfyUI AI 影片生成入門:文生影片與圖生影片

ComfyUI 不只能生成圖片。近年開源的影片模型(例如 Wan 系列、LTX-Video、HunyuanVideo 等)都可以在 ComfyUI 中使用,生成數秒的短影片。

兩種主要方式

方式輸入適合
文生影片(T2V)提示詞從零產生畫面
圖生影片(I2V)一張圖片 + 提示詞讓一張圖「動起來」,畫面最可控

實務上圖生影片最常用:先用圖像模型做出滿意的畫面(或使用自己的照片、插畫),再生成動態,品質與一致性都比較好。

硬體需求

影片生成非常吃資源:

  • 顯示卡記憶體:建議 16 GB 以上;12 GB 以下需要使用量化版本或較小的模型,並降低解析度與影格數。
  • 系統記憶體:建議 32 GB 以上。
  • 時間:一段幾秒的影片,視硬體與設定可能需要幾分鐘到數十分鐘。

許多影片模型提供不同大小的版本(例如較小的參數量),以及 FP8、GGUF 量化版本,記憶體不足時優先選擇這些版本。

從官方範本開始

影片模型的工作流程比圖片複雜,強烈建議從範本開始:

  1. 選單 → 瀏覽範本 → 影片(Video)分類。
  2. 選擇模型與方式,例如某個模型的「圖生影片」範本。
  3. 依提示下載需要的模型檔(擴散模型、文字編碼器、VAE,圖生影片有時還需要圖像編碼器),放到對應資料夾。
  4. 在 Load Image 節點載入起始圖片,修改提示詞,按 Run。

主要參數

參數說明
寬 / 高影片解析度。先用較低解析度(例如 480p 等級)測試
影格數(length / frames)影片長度 = 影格數 ÷ 每秒影格數。部分模型要求特定的影格數(例如 4 的倍數加 1)
fps每秒影格數,依模型建議設定(常見 16~24)
steps、CFG依範本建議值

影格數與解析度對記憶體和時間的影響最大。先用短、小的設定確認動作正確,再提高品質。

提示詞

影片提示詞除了描述畫面,更重要的是描述動作與鏡頭:

A girl with an umbrella walks slowly along a rainy street at night, neon signs reflecting
on the wet ground. The camera slowly follows her from behind. Light rain falls.
  • 描述主體的動作(walks, turns her head, smiles)。
  • 描述鏡頭運動(slow zoom in, pan left, static camera)。
  • 圖生影片時,不需要重複描述圖片中已經有的內容,著重在「要怎麼動」。

輸出影片

範本通常使用 Save Video、Save WEBM 或 VideoHelperSuite 的 Video Combine 節點輸出 MP4 / WebM / GIF,檔案存在 output 資料夾。

加速技巧

  • 使用加速 LoRA(Lightning 等類型)可以把步數降到個位數,生成時間大幅縮短。
  • 使用 FP8 或 GGUF 量化模型。
  • 先用低解析度生成,滿意後再放大(影片放大也有專門的模型與工作流程)。

現實的期待

  • 開源影片模型目前大多產生數秒的片段,長影片需要分段生成再剪接。
  • 複雜的動作、手部、文字仍然容易出錯,多生成幾次挑選最好的結果。
  • 模型更新非常快,幾個月內就會有更好的新模型,定期查看範本中的新選項。

生成真人影片時,請遵守法律與平台規範,不要製作冒充他人或誤導性的內容。

更新於 2026年10月12日