ComfyUI 훈위안 비디오 예시

• 핵심 아키텍처: Sora와 유사한 DiT(Diffusion Transformer) 아키텍처를 사용하며, 텍스트, 이미지, 모션 정보를 효과적으로 융합해 생성된 비디오 프레임 간의 일관성, 품질 및 정렬성을 향상시킵니다. 통합된 풀 어텐션 메커니즘은 다중 뷰 카메라 전환을 가능하게 하면서도 주제의 일관성을 보장합니다.
• 3D VAE: 맞춤형 3D VAE는 비디오를 압축된 잠재공간으로 변환해 이미지-투-비디오 생성을 더욱 효율적으로 만듭니다.
• 우수한 이미지-비디오-텍스트 정렬성: 이미지와 비디오 생성 모두에 뛰어난 MLLM 텍스트 인코더를 활용해 텍스트 지침을 더 잘 따르고, 세부사항을 포착하며 복잡한 추론을 수행합니다.

​

모든 워크플로우에 공통되는 모델

• clip_l.safetensors
• llava_llama3_fp8_scaled.safetensors
• hunyuan_video_vae_bf16.safetensors

ComfyUI/
├── models/
│   ├── text_encoders/
│   │   ├── clip_l.safetensors
│   │   └── llava_llama3_fp8_scaled.safetensors
│   ├── vae/
│   │   └── hunyuan_video_vae_bf16.safetensors

​

훈위안 텍스트-투-비디오 워크플로우

​

1. 워크플로우

아래 이미지를 다운로드해 ComfyUI로 드래그하여 워크플로우를 로드하세요:

​

2. 수동 모델 설치

ComfyUI/
├── models/
│   ├── text_encoders/
│   │   ├── clip_l.safetensors                       // 공유 모델
│   │   └── llava_llama3_fp8_scaled.safetensors      // 공유 모델
│   ├── vae/
│   │   └── hunyuan_video_vae_bf16.safetensors       // 공유 모델
│   └── diffusion_models/
│       └── hunyuan_video_t2v_720p_bf16.safetensors  // T2V 모델

​

3. 워크플로우 실행 단계

1. DualCLIPLoader 노드가 다음 모델을 로드했는지 확인하세요:
   • clip_name1: clip_l.safetensors
   • clip_name2: llava_llama3_fp8_scaled.safetensors
2. Load Diffusion Model 노드가 hunyuan_video_t2v_720p_bf16.safetensors를 로드했는지 확인하세요.
3. Load VAE 노드가 hunyuan_video_vae_bf16.safetensors를 로드했는지 확인하세요.
4. Queue 버튼을 클릭하거나 단축키 Ctrl(cmd) + Enter를 사용해 워크플로우를 실행하세요.

​

훈위안 이미지-투-비디오 워크플로우

• v1 “concat”: 더 나은 모션 유연성 대신 이미지 지침에 덜 충실함
• v2 “replace”: v1 다음날 업데이트된 버전으로, 이미지 지침은 더 나아졌지만 v1보다 다소 덜 역동적인 느낌이 있음

v1 “concat”

v2 “replace”

​

v1과 v2 버전 공통 모델

• llava_llama3_vision.safetensors

​

v1 “concat” 이미지-투-비디오 워크플로우

​

1. 워크플로우 및 자산

아래 워크플로우 이미지를 다운로드해 ComfyUI로 드래그하여 워크플로우를 로드하세요:

아래 이미지를 다운로드해 이미지-투-비디오 생성의 시작 프레임으로 사용하세요:

​

2. 관련 모델 수동 설치

• hunyuan_video_image_to_video_720p_bf16.safetensors

ComfyUI/
├── models/
│   ├── clip_vision/
│   │   └── llava_llama3_vision.safetensors                     // I2V 공유 모델
│   ├── text_encoders/
│   │   ├── clip_l.safetensors                                  // 공유 모델
│   │   └── llava_llama3_fp8_scaled.safetensors                 // 공유 모델
│   ├── vae/
│   │   └── hunyuan_video_vae_bf16.safetensors                  // 공유 모델
│   └── diffusion_models/
│       └── hunyuan_video_image_to_video_720p_bf16.safetensors  // I2V v1 "concat" 버전 모델

​

3. 워크플로우 실행 단계

1. DualCLIPLoader가 다음 모델을 로드했는지 확인하세요:
   • clip_name1: clip_l.safetensors
   • clip_name2: llava_llama3_fp8_scaled.safetensors
2. Load CLIP Vision가 llava_llama3_vision.safetensors를 로드했는지 확인하세요.
3. Load Image Model가 hunyuan_video_image_to_video_720p_bf16.safetensors를 로드했는지 확인하세요.
4. Load VAE가 vae_name: hunyuan_video_vae_bf16.safetensors를 로드했는지 확인하세요.
5. Load Diffusion Model가 hunyuan_video_image_to_video_720p_bf16.safetensors를 로드했는지 확인하세요.
6. Queue 버튼을 클릭하거나 단축키 Ctrl(cmd) + Enter를 사용해 워크플로우를 실행하세요.

​

v2 “replace” 이미지-투-비디오 워크플로우

​

1. 워크플로우 및 자산

아래 워크플로우 이미지를 다운로드해 ComfyUI로 드래그하여 워크플로우를 로드하세요:

아래 이미지를 다운로드해 이미지-투-비디오 생성의 시작 프레임으로 사용하세요:

​

2. 관련 모델 수동 설치

• hunyuan_video_v2_replace_image_to_video_720p_bf16.safetensors

ComfyUI/
├── models/
│   ├── clip_vision/
│   │   └── llava_llama3_vision.safetensors                                // I2V 공유 모델
│   ├── text_encoders/
│   │   ├── clip_l.safetensors                                             // 공유 모델
│   │   └── llava_llama3_fp8_scaled.safetensors                            // 공유 모델
│   ├── vae/
│   │   └── hunyuan_video_vae_bf16.safetensors                             // 공유 모델
│   └── diffusion_models/
│       └── hunyuan_video_v2_replace_image_to_video_720p_bf16.safetensors  // V2 "replace" 버전 모델

​

3. 워크플로우 실행 단계

1. DualCLIPLoader 노드가 다음 모델을 로드했는지 확인하세요:
   • clip_name1: clip_l.safetensors
   • clip_name2: llava_llama3_fp8_scaled.safetensors
2. Load CLIP Vision 노드가 llava_llama3_vision.safetensors를 로드했는지 확인하세요.
3. Load Image Model 노드가 hunyuan_video_image_to_video_720p_bf16.safetensors를 로드했는지 확인하세요.
4. Load VAE 노드가 hunyuan_video_vae_bf16.safetensors를 로드했는지 확인하세요.
5. Load Diffusion Model 노드가 hunyuan_video_v2_replace_image_to_video_720p_bf16.safetensors를 로드했는지 확인하세요.
6. Queue 버튼을 클릭하거나 단축키 Ctrl(cmd) + Enter를 사용해 워크플로우를 실행하세요.

​

직접 해보세요

미래형 로봇이 발레를 추는 모습, 역동적인 움직임, 빠른 속도, 빠른 촬영, 움직이는 장면

검을 휘두르며 카메라를 치는 사무라이. 카메라 앵글 이동, 줌인, 빠른 장면, 초고속, 역동적

날아다니는 차가 빠르게 움직이며 도시를 날아다님

야간 도시에서 벌어지는 사이버펑크 자동차 경주, 역동적, 초고속, 빠른 촬영