Skip to main content
Wan Dancer es un modelo de generación de video de baile guiado por audio, construido sobre la arquitectura Wan 2.2. Utiliza un marco jerárquico con modelos expertos globales y locales para generar videos de baile coherentes y expresivos, sincronizados con la música de entrada. Dada una imagen de referencia de un personaje y una pista de audio, Wan Dancer produce un video de baile en el que el personaje realiza movimientos que coinciden con el ritmo y el estilo de la música. El modelo global captura la estructura general del baile y la coordinación corporal, mientras que el modelo local refina los detalles del movimiento para lograr un resultado natural y de alta calidad.

​
Aspectos destacados del modelo

  • Generación de baile impulsada por audio: genera movimientos de baile directamente a partir de la música, sin keyframing manual ni captura de movimiento
  • Marco jerárquico: arquitectura de dos etapas (global + local) para un movimiento corporal coherente y un refinamiento detallado del movimiento
  • Salida sincronizada con la música: los movimientos de baile se alinean de forma natural al ritmo y tempo del audio de entrada
  • Control de estilo: estilo de baile y amplitud del movimiento configurables para la dirección creativa
  • Generación a escala de minutos: produce videos de baile coherentes y de formato largo con consistencia temporal durante toda la duración

​
Resumen del flujo de trabajo

El flujo de trabajo Wan Dancer toma dos entradas: una imagen de referencia del personaje y un archivo de audio. Genera dos salidas de video: una salida de vista previa global que muestra la estructura general del baile y una salida final refinada con detalles de movimiento mejorados.
Asegúrate de que tu ComfyUI esté actualizado.Los flujos de trabajo de esta guía se encuentran en las Plantillas de flujos de trabajo. Si no los encuentras en las plantillas, es posible que tu ComfyUI esté desactualizado.Si faltan nodos al cargar un flujo de trabajo, estas son las posibles razones:
  1. No estás usando la última versión de ComfyUI (versión nocturna)
  2. Algunos nodos fallaron al importarse durante el inicio

​
Flujo de trabajo Wan Dancer

​
Wan Dancer: Music to Dance

Genera videos de baile coherentes de escala de minutos a partir de música usando un marco jerárquico Wan Dancer. Ingresa un archivo de música y una imagen de referencia para producir videos de baile sincronizados. Vista previa del flujo de trabajo Wan Dancer: Music to Dance

Ejecutar en Comfy Cloud

Abrir en Comfy Cloud

Descargar flujo de trabajo

Descarga el JSON o busca “Wan Dancer” en la Biblioteca de plantillas
Materiales de entrada Sube estos archivos a los nodos correspondientes:

blue_dancer.png

nodo 547 de LoadImage · blue_dancer.png

wan_dancer_reference_audio.mp3

nodo 548 de LoadAudio · wan_dancer_reference_audio.mp3
blue_dancer.png

​
3. Descargar modelos manualmente

Modelos Diffusion LoRA Codificador de texto CLIP Vision VAE

​
4. Instrucciones del flujo de trabajo

Wan Dancer muestrea 149 fotogramas a la vez y requiere una cantidad considerable de VRAM. El flujo de trabajo predeterminado genera un video de 5 segundos. Asegúrate de tener una GPU con suficiente VRAM antes de ejecutar este flujo de trabajo.
  1. Carga la imagen de referencia: Usa el nodo Load Image para subir la imagen de tu personaje. La entrada predeterminada usa blue_dancer.png.
  2. Carga el archivo de audio: Usa el nodo Load Audio para subir tu música o pista de audio. La entrada predeterminada usa wan_dancer_reference_audio.mp3.
  3. Configura los parámetros de baile:
    • dance_style: selecciona el estilo de baile para el video de salida
    • motion_amplitude: controla la intensidad de los movimientos de baile
    • audio_duration: ajústalo para que coincida con la duración de tu audio de entrada
    • final_duration: elige la duración final del video de salida
  4. Configura las dimensiones de salida:
    • width y height: establece la resolución del video de salida. Elige valores adecuados para la VRAM disponible de tu GPU.
  5. Verifica las rutas de los modelos: Asegúrate de que los controles de selección de modelos apunten a los archivos de modelo correctos:
    • global_model: debe cargar wan2.2_dancer_14b_global_fp8_scaled.safetensors
    • local_model: debe cargar wan2.2_dancer_14b_local_fp8_scaled.safetensors
    • lightning_lora: debe cargar lightx2v_I2V_14B_480p_cfg_step_distill_rank64_bf16.safetensors
    • clip_vision: debe cargar clip_vision_h.safetensors
  6. Ejecuta la generación: Haz clic en el botón Run o usa el atajo Ctrl(Cmd) + Enter para ejecutar la generación de video.

​
5. Salida

El flujo de trabajo produce dos salidas de video:
  • Vista previa de la salida global: muestra la estructura general del baile generada por el modelo global
  • Salida final: el video de baile refinado después de la mejora del modelo local
Los nodos SaveVideo guardan ambas salidas automáticamente.

​
Información del modelo

Wan Dancer es un modelo de código abierto publicado bajo la licencia Apache 2.0. Los pesos del modelo están disponibles en Hugging Face:

​
Reportar problemas

Si encuentras errores en tiempo de ejecución o un comportamiento inesperado:
  • Asegúrate de que ComfyUI esté actualizado a la última versión
  • Comprueba que todos los modelos requeridos estén descargados y colocados en los directorios correctos
  • Para usuarios de Desktop/Cloud: las actualizaciones siguen las versiones estables, por lo que los modelos compatibles con la versión nocturna pueden no estar disponibles de inmediato
Reporta problemas en: ComfyUI/issues