Ejemplo de flujo de trabajo de texto a imagen con HiDream-I1 nativo de ComfyUI

Características del modelo

• Basada en Diffusion Transformer (DiT), con módulos MMDiT de doble flujo que procesan información multimodal y módulos DiT de flujo único que optimizan la consistencia global.
• El mecanismo de enrutamiento dinámico asigna recursos de cómputo de forma flexible, lo que mejora la capacidad de procesar escenas complejas y ofrece un rendimiento excelente en la restauración de color, el procesamiento de bordes y otros detalles.

• OpenCLIP ViT-bigG, OpenAI CLIP ViT-L (alineación semántica visual)
• T5-XXL (análisis de texto largo)
• Llama-3.1-8B-Instruct (comprensión de instrucciones) Esta combinación alcanza un rendimiento SOTA en el análisis semántico complejo de colores, cantidades, relaciones espaciales, etc., y su soporte de prompts en chino supera de forma notable a modelos de código abierto similares.

Acerca de este ejemplo de flujo de trabajo

Flujo de trabajo de HiDream-I1

• HiDream-I1-Full puede generar imágenes de la más alta calidad
• HiDream-I1-Dev equilibra la generación de imágenes de alta calidad con la velocidad
• HiDream-I1-Fast puede generar imágenes en solo 16 pasos, ideal para escenarios que requieren iteración en tiempo real

Instalar los modelos

• clip_l_hidream.safetensors
• clip_g_hidream.safetensors
• t5xxl_fp8_e4m3fn_scaled.safetensors Este modelo se ha usado en muchos flujos de trabajo, es posible que ya hayas descargado este archivo.
• llama_3.1_8b_instruct_fp8_scaled.safetensors

• ae.safetensors Este es el modelo VAE de Flux; si has usado antes el flujo de trabajo de Flux, es posible que ya hayas descargado este archivo.

📂 ComfyUI/
├── 📂 models/
│   ├── 📂 text_encoders/
│   │   ├─── clip_l_hidream.safetensors
│   │   ├─── clip_g_hidream.safetensors
│   │   ├─── t5xxl_fp8_e4m3fn_scaled.safetensors
│   │   └─── llama_3.1_8b_instruct_fp8_scaled.safetensors
│   └── 📂 vae/
│   │   └── ae.safetensors
│   └── 📂 diffusion_models/
│       └── ...               # We will guide you to install in the corresponding version workflow       

Flujo de trabajo de la versión completa de HiDream I1

HiDream I1 Full

1. Descargar el archivo del modelo

• Versión FP8: hidream_i1_full_fp8.safetensors requiere más de 16 GB de VRAM
• Versión completa: hidream_i1_full_f16.safetensors requiere más de 27 GB de VRAM

2. Descargar el archivo del flujo de trabajo

Descarga la imagen de abajo y arrástrala a ComfyUI para cargar el flujo de trabajo correspondiente

3. Completar el flujo de trabajo paso a paso

1. Asegúrate de que el nodo Load Diffusion Model esté usando el archivo hidream_i1_full_fp8.safetensors
2. Asegúrate de que los cuatro text encoders correspondientes en QuadrupleCLIPLoader estén cargados correctamente
   • clip_l_hidream.safetensors
   • clip_g_hidream.safetensors
   • t5xxl_fp8_e4m3fn_scaled.safetensors
   • llama_3.1_8b_instruct_fp8_scaled.safetensors
3. Asegúrate de que el nodo Load VAE esté usando el archivo ae.safetensors
4. Para la versión completa, debes establecer el parámetro shift en ModelSamplingSD3 a 3.0
5. Para el nodo Ksampler, debes aplicar las siguientes configuraciones
   • Establece steps en 50
   • Establece cfg en 5.0
   • (Opcional) Establece sampler en lcm
   • (Opcional) Establece scheduler en normal
6. Haz clic en el botón Run, o usa el atajo Ctrl(cmd) + Enter para ejecutar la generación de la imagen

Flujo de trabajo de la versión Dev de HiDream-I1

HiDream I1 Dev

1. Descargar los archivos de modelo

• Versión FP8: hidream_i1_dev_fp8.safetensors requiere más de 16GB de VRAM
• Versión completa: hidream_i1_dev_bf16.safetensors requiere más de 27GB de VRAM

2. Descargar el archivo del flujo de trabajo

3. Completar el flujo de trabajo paso a paso

1. Asegúrate de que el nodo Load Diffusion Model esté usando el archivo hidream_i1_dev_fp8.safetensors
2. Asegúrate de que los cuatro codificadores de texto correspondientes en QuadrupleCLIPLoader estén cargados correctamente
   • clip_l_hidream.safetensors
   • clip_g_hidream.safetensors
   • t5xxl_fp8_e4m3fn_scaled.safetensors
   • llama_3.1_8b_instruct_fp8_scaled.safetensors
3. Asegúrate de que el nodo Load VAE esté usando el archivo ae.safetensors
4. Para la versión dev, debes establecer el parámetro shift de ModelSamplingSD3 en 6.0
5. Para el nodo Ksampler, debes aplicar las siguientes configuraciones
   • Establece steps en 28
   • (Importante) Establece cfg en 1.0
   • (Opcional) Establece sampler en lcm
   • (Opcional) Establece scheduler en normal
6. Haz clic en el botón Run, o usa el atajo Ctrl(cmd) + Enter para ejecutar la generación de la imagen

Flujo de trabajo de la versión rápida de HiDream-I1

HiDream I1 Fast

1. Descargar el archivo del modelo

• Versión FP8: hidream_i1_fast_fp8.safetensors requiere más de 16GB de VRAM
• Versión completa: hidream_i1_fast_bf16.safetensors requiere más de 27GB de VRAM

2. Descargar el archivo del flujo de trabajo

3. Completar el flujo de trabajo paso a paso

1. Asegúrate de que el nodo Load Diffusion Model esté usando el archivo hidream_i1_fast_fp8.safetensors
2. Asegúrate de que los cuatro codificadores de texto correspondientes en QuadrupleCLIPLoader estén cargados correctamente
   • clip_l_hidream.safetensors
   • clip_g_hidream.safetensors
   • t5xxl_fp8_e4m3fn_scaled.safetensors
   • llama_3.1_8b_instruct_fp8_scaled.safetensors
3. Asegúrate de que el nodo Load VAE esté usando el archivo ae.safetensors
4. Para la versión fast, debes establecer el parámetro shift de ModelSamplingSD3 en 3.0
5. Para el nodo Ksampler, debes aplicar las siguientes configuraciones
   • Establece steps en 16
   • (Importante) Establece cfg en 1.0
   • (Opcional) Establece sampler en lcm
   • (Opcional) Establece scheduler en normal
6. Haz clic en el botón Run o usa el atajo Ctrl(cmd) + Enter para ejecutar la generación de la imagen

Otros recursos relacionados

Modelos en versión GGUF

• HiDream-I1-Full-gguf
• HiDream-I1-Dev-gguf

Modelos en versión NF4

• HiDream-I1-nf4
• Usa el nodo ComfyUI-HiDream-Sampler para usar el modelo en versión NF4.