Contenido

Tutorial de generación de video con IA en ComfyUI: texto a video e imagen a video

ComfyUI no solo genera imágenes. En los últimos años, han aparecido modelos de video de código abierto, como las series Wan, LTX-Video y HunyuanVideo, que también puedes usar en ComfyUI para generar clips de unos segundos.

Dos métodos principales

MétodoEntradaIdeal para
Texto a video (T2V)PromptCrear una escena desde cero
Imagen a video (I2V)Una imagen + un prompt«Dar vida» a una imagen con el mayor control posible sobre la escena

En la práctica, imagen a video es lo más habitual: primero creas una imagen que te guste con un modelo de imágenes (o usas una foto o ilustración propia) y luego generas el movimiento. Así consigues mejores resultados y más coherencia.

Requisitos de hardware

La generación de video consume muchos recursos:

  • Memoria de la GPU: se recomiendan 16 GB o más. Con 12 GB o menos, tendrás que usar versiones cuantizadas o modelos más pequeños, y reducir la resolución y el número de fotogramas.
  • Memoria del sistema: se recomiendan 32 GB o más.
  • Tiempo: un video de unos segundos puede tardar desde varios minutos hasta decenas de minutos, según el hardware y los ajustes.

Muchos modelos de video ofrecen versiones de distintos tamaños (por ejemplo, con menos parámetros), además de versiones cuantizadas FP8 y GGUF. Si te falta memoria, elige primero una de estas opciones.

Empieza con una plantilla oficial

Los flujos de trabajo para modelos de video son más complejos que los de imagen, así que te recomendamos encarecidamente empezar con una plantilla:

  1. Menú → Browse Templates → categoría Video.
  2. Elige un modelo y un método, por ejemplo, una plantilla de «imagen a video» para el modelo que quieras.
  3. Descarga los archivos de modelo necesarios siguiendo las indicaciones (modelo de difusión, codificador de texto, VAE y, a veces, un codificador de imágenes para imagen a video) y guárdalos en las carpetas correspondientes.
  4. Carga la imagen inicial en el nodo Load Image, modifica el prompt y pulsa Run.

Parámetros principales

ParámetroDescripción
Ancho / altoResolución del video. Primero prueba con una resolución baja (por ejemplo, del nivel de 480p)
Número de fotogramas (length / frames)Duración del video = número de fotogramas ÷ fotogramas por segundo. Algunos modelos requieren un número específico de fotogramas (por ejemplo, un múltiplo de 4 más 1)
fpsFotogramas por segundo; ajústalo según las recomendaciones del modelo (lo habitual es entre 16 y 24)
steps, CFGUsa los valores recomendados por la plantilla

El número de fotogramas y la resolución son los factores que más afectan a la memoria y al tiempo. Empieza con ajustes breves y pequeños para confirmar que el movimiento es correcto; después, aumenta la calidad.

Prompts

En los prompts para video, además de describir la escena, es fundamental describir el movimiento y la cámara:

A girl with an umbrella walks slowly along a rainy street at night, neon signs reflecting
on the wet ground. The camera slowly follows her from behind. Light rain falls.
  • Describe el movimiento del sujeto (walks, turns her head, smiles).
  • Describe el movimiento de cámara (slow zoom in, pan left, static camera).
  • En imagen a video, no hace falta repetir lo que ya aparece en la imagen; céntrate en «cómo debe moverse».

Exportar videos

Las plantillas suelen usar los nodos Save Video, Save WEBM o Video Combine de VideoHelperSuite para exportar a MP4, WebM o GIF. Los archivos se guardan en la carpeta output.

Consejos para acelerar

  • Con un LoRA de aceleración (como los de tipo Lightning), puedes reducir los pasos a una cifra y acortar mucho el tiempo de generación.
  • Usa modelos cuantizados FP8 o GGUF.
  • Primero genera el video a baja resolución y, cuando te convenza, amplíalo (también hay modelos y flujos de trabajo específicos para ampliar videos).

Expectativas realistas

  • Actualmente, la mayoría de los modelos de video de código abierto generan clips de unos segundos. Para crear videos más largos, tendrás que generarlos por partes y luego montarlos.
  • Los movimientos complejos, las manos y el texto todavía suelen dar problemas. Genera varias versiones y elige el mejor resultado.
  • Los modelos cambian muy rápido: en unos meses pueden aparecer otros mejores. Consulta periódicamente las nuevas opciones de las plantillas.

Al generar videos de personas reales, respeta la ley y las normas de la plataforma. No crees contenido que suplante a otras personas o pueda inducir a error.

Actualizado 12 de octubre de 2026