ComfyUI Wan2.2 Fun Control 動画生成例

• マルチモーダル制御: Canny（線画）、Depth（深度）、OpenPose（人体ポーズ）、MLSD（幾何学的エッジ）、および軌跡制御を含む複数の制御条件をサポート
• 高品質動画生成: Wan2.2 アーキテクチャに基づき、映画レベルの品質の動画を出力
• 多言語サポート: 中国語や英語を含む多言語プロンプトをサポート

• 🤗Wan2.2-Fun-A14B-Control
• コードリポジトリ：VideoX-Fun

​

ComfyOrg Wan2.2 Fun InP & Control YouTube ライブストリームリプレイ

​

Wan2.2 Fun Control ビデオ生成ワークフローの例

1. lightx2v の Wan2.2-Lightning 4ステップLoRAを使用したバージョン：ビデオのダイナミクスが一部失われる可能性がありますが、より高速です。
2. 高速化LoRAを使用しない fp8_scaled バージョン

​

1. ワークフローと素材のダウンロード

ここでは前処理済みのビデオを使用しています。

​

2. モデル

ComfyUI/
├───📂 models/
│   ├───📂 diffusion_models/
│   │   ├─── wan2.2_fun_control_low_noise_14B_fp8_scaled.safetensors
│   │   └─── wan2.2_fun_control_high_noise_14B_fp8_scaled.safetensors
│   ├───📂 loras/
│   │   ├─── wan2.2_i2v_lightx2v_4steps_lora_v1_high_noise.safetensors
│   │   └─── wan2.2_i2v_lightx2v_4steps_lora_v1_low_noise.safetensors
│   ├───📂 text_encoders/
│   │   └─── umt5_xxl_fp8_e4m3fn_scaled.safetensors 
│   └───📂 vae/
│       └── wan_2.1_vae.safetensors

​

3. ワークフローガイド

1. 高ノイズモデルとLoRAの読み込み
   • Load Diffusion Modelノードがwan2.2_fun_control_high_noise_14B_fp8_scaled.safetensorsモデルを読み込んでいることを確認してください
   • LoraLoaderModelOnlyノードがwan2.2_i2v_lightx2v_4steps_lora_v1_high_noise.safetensorsを読み込んでいることを確認してください
2. 低ノイズモデルとLoRAの読み込み
   • Load Diffusion Modelノードがwan2.2_fun_control_low_noise_14B_fp8_scaled.safetensorsモデルを読み込んでいることを確認してください
   • LoraLoaderModelOnlyノードがwan2.2_i2v_lightx2v_4steps_lora_v1_low_noise.safetensorsを読み込んでいることを確認してください
3. Load CLIPノードがumt5_xxl_fp8_e4m3fn_scaled.safetensorsモデルを読み込んでいることを確認してください
4. Load VAEノードがwan_2.1_vae.safetensorsモデルを読み込んでいることを確認してください
5. Load Imageノードで開始フレームをアップロードしてください
6. 2番目のLoad videoノードでポーズ制御ビデオを読み込んでください。提供されたビデオは前処理済みで、そのまま使用できます
7. 前処理済みのポーズビデオを提供しているため、対応するビデオ画像前処理ノードを無効にする必要があります。ノードを選択し、Ctrl + Bで無効にできます
8. プロンプトを変更：中国語と英語の両方を使用できます
9. Wan22FunControlToVideoでビデオの寸法を変更します。デフォルトは640×640解像度に設定されており、VRAMが少ないユーザーの処理時間が過度にならないようにしています
10. Runボタンをクリックするか、ショートカットCtrl(cmd) + Enterを使用してビデオ生成を実行します

​

補足説明