메인 콘텐츠로 건너뛰기

​
Wan2.1-Fun-InP 소개

Wan-Fun InP는 알리바바가 공개한 오픈소스 영상 생성 모델로, Wan2.1-Fun 시리즈의 일부이며, 이미지로부터 첫 프레임과 마지막 프레임 제어 기능을 갖춘 동영상을 생성하는 데 중점을 두고 있습니다. 주요 특징:
  • 첫 프레임과 마지막 프레임 제어: 첫 프레임과 마지막 프레임 이미지를 모두 입력해 그 사이의 전환 동영상을 생성할 수 있어 동영상의 일관성과 창의성을 높입니다. 이전 커뮤니티 버전에 비해 알리바바의 공식 모델은 더 안정적이고 훨씬 높은 품질의 결과를 제공합니다.
  • 다양한 해상도 지원: 512×512, 768×768, 1024×1024 등 다양한 해상도로 동영상을 생성해 다양한 시나리오 요구사항을 충족합니다.
모델 버전:
  • 1.3B 경량형: 로컬 배포 및 빠른 추론에 적합하며 낮은 VRAM 요구 사항
  • 14B 고성능형: 모델 크기가 32GB 이상으로 더 나은 결과를 제공하지만 높은 VRAM 요구 사항
아래는 관련 모델 가중치와 코드 저장소입니다:
현재 ComfyUI는 Wan2.1 Fun InP 모델을 기본적으로 지원합니다. 이 튜토리얼을 시작하기 전에 ComfyUI를 업데이트하여 버전이 이 커밋 이후인지 확인해 주세요.
Make sure your ComfyUI is updated.Workflows in this guide can be found in the Workflow Templates. If you can’t find them in the template, your ComfyUI may be outdated. (Desktop version’s update will delay sometime)If nodes are missing when loading a workflow, possible reasons:
  1. You are not using the latest ComfyUI version (Nightly version)
  2. Some nodes failed to import at startup

​
Wan2.1 Fun InP 워크플로우

아래 이미지를 다운로드해 ComfyUI로 드래그하여 워크플로우를 불러오세요: 워크플로우 파일

​
1. 워크플로우 파일 다운로드

​
2. 수동 모델 설치

자동 모델 다운로드가 효과적이지 않은 경우, 수동으로 모델을 다운로드해 해당 폴더에 저장해 주세요. 다음 모델들은 Wan_2.1_ComfyUI_repackaged 및 Wan2.1-Fun에서 찾을 수 있습니다. 디퓨전 모델 - 1.3B 또는 14B를 선택하세요. 14B 버전은 파일 크기가 더 크고(32GB), VRAM 요구 사항도 높습니다: 텍스트 인코더 - 다음 모델 중 하나를 선택하세요 (fp16 정밀도는 크기가 더 크고 성능 요구 사항도 높습니다): VAE CLIP 비전 파일 저장 위치: 
📂 ComfyUI/
├── 📂 models/
│   ├── 📂 diffusion_models/
│   │   └── wan2.1_fun_inp_1.3B_bf16.safetensors
│   ├── 📂 text_encoders/
│   │   └─── umt5_xxl_fp8_e4m3fn_scaled.safetensors
│   └── 📂 vae/
│   │   └── wan_2.1_vae.safetensors
│   └── 📂 clip_vision/
│       └──  clip_vision_h.safetensors

​
3. 워크플로우 단계별 완료

ComfyUI Wan2.1 Fun InP 동영상 생성 워크플로우 다이어그램
  1. Load Diffusion Model 노드가 wan2.1_fun_inp_1.3B_bf16.safetensors를 로드했는지 확인하세요.
  2. Load CLIP 노드가 umt5_xxl_fp8_e4m3fn_scaled.safetensors를 로드했는지 확인하세요.
  3. Load VAE 노드가 wan_2.1_vae.safetensors를 로드했는지 확인하세요.
  4. Load CLIP Vision 노드가 clip_vision_h.safetensors를 로드했는지 확인하세요.
  5. 시작 프레임을 Load Image 노드에 업로드하세요 (이름을 Start_image로 변경).
  6. 끝 프레임을 두 번째 Load Image 노드에 업로드하세요.
  7. (선택사항) 프롬프트를 수정하세요 (영어와 중국어 모두 지원).
  8. (선택사항) WanFunInpaintToVideo에서 동영상 크기를 조정하세요. 너무 큰 크기는 피하세요.
  9. Run 버튼을 클릭하거나 단축키 Ctrl(cmd) + Enter를 사용해 동영상 생성을 실행하세요.

​
4. 워크플로우 참고사항

올바른 모델을 사용하도록 주의해 주세요. wan2.1_fun_inp_1.3B_bf16.safetensors와 wan2.1_fun_control_1.3B_bf16.safetensors는 같은 폴더에 저장되어 있고 이름도 매우 비슷합니다. 올바른 모델을 사용하고 있는지 확인하세요.
  • Wan Fun InP를 사용할 때는 종종 프롬프트를 수정해 해당 장면 전환의 정확성을 보장해야 합니다.

​
기타 Wan2.1 Fun InP 또는 동영상 관련 맞춤형 노드 패키지