Saltar al contenido principal
Wan2.1 Fun Camera es un modelo de generación de video con movimiento de cámara del proyecto VideoX-Fun de Alibaba, con soporte nativo en ComfyUI. Genera videos cuyo movimiento de cámara sigue tus condiciones de control, así puedes dirigir cómo se mueve la cámara en el resultado en lugar de describir cada plano en el prompt. El modelo forma parte de la familia Wan2.1-Fun y se distribuye en dos tamaños: la versión 1.3B (unos 19 GB) para ejecuciones locales ligeras y la versión 14B (unos 47 GB) para un resultado de mayor fidelidad. Ambas admiten predicción de video multirresolución a 512, 768 y 1024 píxeles, están entrenadas a 16 fotogramas por segundo para hasta 81 fotogramas (unos 5 segundos) y aceptan prompts en varios idiomas. Los pesos se publican bajo la licencia Apache-2.0.

Acerca de Wan2.1 Fun Camera

Wan2.1 Fun Camera es un proyecto de generación de video lanzado por el equipo de Alibaba, centrado en controlar los efectos de la generación de video mediante el movimiento de cámara. Descarga de los pesos del modelo: Repositorio de código: VideoX-Fun ComfyUI ya es compatible de forma nativa con el modelo Wan2.1 Fun Camera.
Asegúrate de que tu ComfyUI esté actualizado.Los flujos de trabajo de esta guía se encuentran en las Plantillas de flujos de trabajo. Si no los encuentras en las plantillas, es posible que tu ComfyUI esté desactualizado.Si faltan nodos al cargar un flujo de trabajo, estas son las posibles razones:
  1. No estás usando la última versión de ComfyUI (versión nocturna)
  2. Algunos nodos fallaron al importarse durante el inicio

Instalación del modelo

Estos modelos solo necesitan instalarse una vez. Además, la información de descarga de los modelos está incluida en las imágenes del flujo de trabajo correspondiente, así que puedes elegir la forma de descarga que prefieras. Puedes encontrar todos los siguientes modelos en Wan_2.1_ComfyUI_repackaged

Modelos de difusión

Elige 1.3B o 14B:

wan2.1_fun_camera_v1.1_1.3B_bf16.safetensors

Modelo de difusión Wan2.1 Fun Camera 1.3B

wan2.1_fun_camera_v1.1_14B_bf16.safetensors

Modelo de difusión Wan2.1 Fun Camera 14B
Si ya has usado modelos relacionados con Wan2.1 antes, ya deberías tener los siguientes modelos. Si no es así, descárgalos:

Codificadores de texto

Elige uno de los siguientes:

umt5_xxl_fp16.safetensors

Codificador de texto de precisión completa

umt5_xxl_fp8_e4m3fn_scaled.safetensors

Codificador de texto cuantizado FP8 (RECOMENDADO para menos VRAM)

VAE

wan_2.1_vae.safetensors

Modelo VAE Wan2.1

CLIP Vision

clip_vision_h.safetensors

Codificador de visión CLIP
Ubicación de almacenamiento de archivos:

Flujo de trabajo ComfyUI Wan2.1 Fun Camera 1.3B

Wan 2.1 Fun Camera 1.3B

Genera videos dinámicos con movimientos de cámara cinematográficos usando el modelo Wan 2.1 Fun Camera 1.3B. Vista previa del flujo de trabajo Wan 2.1 Fun Camera 1.3B

Ejecutar en Comfy Cloud

Abrir en Comfy Cloud

Descargar flujo de trabajo

Descarga el JSON o busca “Wan 2.1 Fun Camera 1.3B” en la Biblioteca de plantillas
Descarga el video de abajo y arrástralo a ComfyUI para cargar el flujo de trabajo correspondiente:
Si quieres usar la versión 14B, solo reemplaza el archivo del modelo por la versión 14B, pero ten en cuenta los requisitos de VRAM.
Materiales de entrada Sube este archivo al nodo LoadImage correspondiente:

video_wan2.1_fun_camera_v1.1_1.3B_start_image.jpg

Nodo LoadImage 52 · video_wan2.1_fun_camera_v1.1_1.3B_start_image.jpg
video_wan2.1_fun_camera_v1.1_1.3B_start_image.jpg

3. Completar el flujo de trabajo paso a paso

Pasos del flujo de trabajo Wan2.1 Fun Camera
  1. Asegúrate de que esté cargada la versión correcta del archivo del modelo:
    • Versión 1.3B: wan2.1_fun_camera_v1.1_1.3B_bf16.safetensors
    • Versión 14B: wan2.1_fun_camera_v1.1_14B_bf16.safetensors
  2. Asegúrate de que el nodo Load CLIP tenga cargado umt5_xxl_fp8_e4m3fn_scaled.safetensors
  3. Asegúrate de que el nodo Load VAE tenga cargado wan_2.1_vae.safetensors
  4. Asegúrate de que el nodo Load CLIP Vision tenga cargado clip_vision_h.safetensors
  5. Sube el fotograma inicial al nodo Load Image
  6. Modifica el prompt si vas a usar tu propia imagen de entrada
  7. Configura el movimiento de cámara en el nodo WanCameraEmbedding
  8. Haz clic en el botón Run o usa el atajo Ctrl(cmd) + Enter para ejecutar la generación

Flujo de trabajo ComfyUI Wan2.1 Fun Camera 14B

Wan 2.1 Fun Camera 14B

Genera videos de alta calidad con control de cámara avanzado usando el modelo completo 14B. Vista previa del flujo de trabajo Wan 2.1 Fun Camera 14B

Ejecutar en Comfy Cloud

Abrir en Comfy Cloud

Descargar flujo de trabajo

Descarga el JSON o busca “Wan 2.1 Fun Camera 14B” en la Biblioteca de plantillas
Materiales de entrada Sube este archivo al nodo LoadImage correspondiente:

video_wan2.1_fun_camera_v1.1_14B_start_image.jpg

Nodo LoadImage 52 · video_wan2.1_fun_camera_v1.1_14B_start_image.jpg
video_wan2.1_fun_camera_v1.1_14B_start_image.jpg

Referencia de rendimiento

Versión 1.3B:
  • Con una resolución de 512x512 en una RTX 4090, generar 81 fotogramas tarda unos 72 segundos
Versión 14B:
  • La RTX 4090 de 24 GB de VRAM puede quedarse sin memoria al generar a una resolución de 512x512, y también se han producido problemas de memoria en la A100 al usar tamaños mayores