Wan2.1-Fun-InP について
Wan-Fun InP は、アリババによってリリースされたオープンソースの動画生成モデルで、Wan2.1-Fun シリーズの一部であり、画像から動画を生成し、最初と最後のフレームを制御することに重点を置いています。
主な機能:
- 最初と最後のフレーム制御: 最初と最後のフレーム画像の両方を入力して、それらの間の遷移動画を生成することをサポートし、動画の一貫性と創造の自由度を向上させます。以前のコミュニティバージョンと比較して、アリババの公式モデルはより安定しており、品質が大幅に向上しています。
- マルチ解像度サポート: 512×512、768×768、1024×1024 などの解像度で動画を生成することをサポートし、さまざまなシナリオの要件に対応します。
モデルバージョン:
- 1.3B 軽量版: ローカル導入と高速推論に適しており、VRAM 要件が低い
- 14B 高性能版: モデルサイズは 32GB+ に達し、より良い結果を提供しますが、より高い VRAM が必要です
以下は関連するモデル重みとコードリポジトリです:
現在、ComfyUI は Wan2.1 Fun InP モデルをネイティブにサポートしています。このチュートリアルを開始する前に、ComfyUI を更新して、バージョンが このコミット 以降であることを確認してください。
ComfyUI が最新版に更新されていることを確認してください。このガイドで紹介するワークフローは、ワークフローテンプレートから入手できます。
テンプレート内に該当のワークフローが見つからない場合、ComfyUI のバージョンが古くなっている可能性があります。(デスクトップ版の更新は若干遅れることがあります)ワークフローを読み込んだ際にノードが欠落している場合の主な原因:
- 最新の ComfyUI(Nightly 版)を使用していない
- 起動時に一部のノードのインポートに失敗している
- デスクトップ版は ComfyUI の安定版(Stable Release)をベースとしており、新しいデスクトップ安定版がリリースされると自動的に更新されます。
- Cloud は、ComfyUI の安定版リリース後に更新されます。
したがって、このドキュメントで記載されているコアノードのうち、一部が利用できない場合は、そのノード機能がまだ最新の安定版に含まれていないためです。次回の安定版リリースをお待ちください。
Wan2.1 Fun InP ワークフロー
下の画像をダウンロードし、ComfyUI へドラッグしてワークフローを読み込みます:
1. ワークフローファイルのダウンロード
2. 手動モデルインストール
自動モデルダウンロードが効果的でない場合は、モデルを手動でダウンロードし、対応するフォルダーに保存してください。
以下のモデルは Wan_2.1_ComfyUI_repackaged と Wan2.1-Fun で見つかります。
Diffusion models - 1.3B または 14B を選択してください。14B バージョンはファイルサイズが大きく (32GB)、VRAM 要件も高くなります:
Text encoders - 以下のモデルのいずれかを選択してください(fp16 精度はサイズが大きく、パフォーマンス要件も高くなります):
VAE
CLIP Vision
ファイル保存場所:
📂 ComfyUI/
├── 📂 models/
│ ├── 📂 diffusion_models/
│ │ └── wan2.1_fun_inp_1.3B_bf16.safetensors
│ ├── 📂 text_encoders/
│ │ └─── umt5_xxl_fp8_e4m3fn_scaled.safetensors
│ └── 📂 vae/
│ │ └── wan_2.1_vae.safetensors
│ └── 📂 clip_vision/
│ └── clip_vision_h.safetensors
3. ワークフローを段階的に完了する
Load Diffusion Model ノードが wan2.1_fun_inp_1.3B_bf16.safetensors をロードしていることを確認してください
Load CLIP ノードが umt5_xxl_fp8_e4m3fn_scaled.safetensors をロードしていることを確認してください
Load VAE ノードが wan_2.1_vae.safetensors をロードしていることを確認してください
Load CLIP Vision ノードが clip_vision_h.safetensors をロードしていることを確認してください
- 開始フレームを
Load Image ノード(Start_image に改名済み)へアップロードしてください
- 2 番目の
Load Image ノードへ終了フレームをアップロードしてください
- (オプション)プロンプトを変更してください(英語と中国語の両方がサポートされています)
- (オプション)
WanFunInpaintToVideo で動画サイズを調整し、過度に大きな寸法を避けてください
Run ボタンをクリックするか、ショートカット Ctrl(cmd) + Enter を使用して動画生成を実行してください
4. ワークフローの注意事項
正しいモデルを使用するようにしてください。wan2.1_fun_inp_1.3B_bf16.safetensors と wan2.1_fun_control_1.3B_bf16.safetensors は同じフォルダーに保存されており、名前が非常に似ています。正しいモデルを使用していることを確認してください。
- Wan Fun InP を使用する場合、対応するシーン遷移の精度を確保するために、プロンプトを頻繁に変更する必要があるかもしれません。
その他の Wan2.1 Fun InP または動画関連のカスタムノードパッケージ