Skip to main content
Wan2.2-Fun-Inp は、Alibaba PAI チームが公開した首尾フレーム制御型動画生成モデルです。ユーザーは開始フレーム画像と終了フレーム画像を入力することで、それらの間を滑らかに遷移する中間動画を生成できます。これにより、クリエイターはより高度な創造的コントロールを実現できます。本モデルは Apache 2.0 ライセンスのもとで公開されており、商用利用も可能です。 主な特徴
  • 首尾フレーム制御機能:開始フレームと終了フレームの画像を入力し、その間の遷移動画を生成。動画の一貫性と創作の自由度を向上
  • 高品質動画生成:Wan2.2 アーキテクチャを基盤とし、映画レベルの品質の動画を出力
  • マルチ解像度対応:512×512、768×768、1024×1024 など複数の解像度での動画生成をサポートし、さまざまなシナリオに対応
モデルバージョン
  • 14B 高性能版:モデルサイズは32GB以上。より良い結果を提供しますが、大量のVRAMを必要とします
関連するモデル重みおよびコードリポジトリは以下の通りです:

ComfyOrg Wan2.2 Fun InP & Control YouTube ライブ配信アーカイブ動画

Wan2.2 Fun Inp 始点・終点フレームビデオ生成ワークフロー例

ComfyUI が最新版に更新されていることを確認してください。このガイドで紹介するワークフローは、ワークフローテンプレートから入手できます。 テンプレート内に該当のワークフローが見つからない場合、ComfyUI のバージョンが古くなっている可能性があります。ワークフローを読み込んだ際にノードが欠落している場合の考えられる原因:
  1. 最新の ComfyUI(Nightly 版)を使用していない
  2. 起動時に一部のノードのインポートに失敗している
このワークフローは2つのバージョンを提供します:
  1. Wan2.2-Lightning 4ステップLoRA(lightx2v提供)を使用した高速ビデオ生成バージョン
  2. 高速化LoRAなしのfp8_scaledバージョン
以下は、RTX4090D 24GB VRAM GPUを使用し、640×640解像度、81フレームでのテスト結果です。 LoRAによる高速化は顕著ですが、ビデオの動きのダイナミクスが失われるため、デフォルトのワークフローでは高速化LoRAバージョンを有効にしています。もう一方のワークフローを使用する場合は、それを選択してCtrl+Bでアクティブにしてください。

1. ワークフローファイルのダウンロード

ComfyUIを最新バージョンにアップデートし、メニューワークフローテンプレートを参照ビデオ 内の「Wan2.2 Fun Inp」を探してワークフローを読み込んでください。 または、ComfyUIを最新バージョンにアップデート後、以下のワークフローをダウンロードしてComfyUIにドラッグ&ドロップで読み込むこともできます。 Wan2.2 Fun Inp ワークフロー

Comfy Cloudで実行

Comfy Cloudで開く

ワークフローをダウンロード

JSONをダウンロード、またはテンプレートライブラリで「Wan2.2 Fun Inp」を検索
以下の素材を始点フレームと終点フレームとして使用します。 入力素材

video_wan2_2_14B_fun_inpaint_start_image.png

ビデオ生成の始点フレーム。この画像をダウンロードして使用するか、ご自身の画像で置き換えてください。

video_wan2_2_14B_fun_inpaint_end_image.png

ビデオ生成の終点フレーム。この画像をダウンロードして使用するか、ご自身の画像で置き換えてください。

2. モデル

このガイドで使用するすべてのモデルはこちらから入手できます。 拡散モデル

高ノイズ 14B FP8スケーリング

wan2.2_fun_inpaint_high_noise_14B_fp8_scaled.safetensors: 開始フレームと終了フレームのインペインティング用の高ノイズ拡散モデル

低ノイズ 14B FP8スケーリング

wan2.2_fun_inpaint_low_noise_14B_fp8_scaled.safetensors: 開始フレームと終了フレームのインペインティング用の低ノイズ拡散モデル
Lightning LoRA(オプション、高速化用)

Lightning 4ステップ高ノイズLoRA

wan2.2_i2v_lightx2v_4steps_lora_v1_high_noise.safetensors: 高ノイズモデル用の4ステップ高速化LoRA

Lightning 4ステップ低ノイズLoRA

wan2.2_i2v_lightx2v_4steps_lora_v1_low_noise.safetensors: 低ノイズモデル用の4ステップ高速化LoRA
VAE

Wan2.1 VAE

wan_2.1_vae.safetensors: エンコードとデコード用のWan2.1 VAE
テキストエンコーダー

UMT5 XXL FP8スケーリング

umt5_xxl_fp8_e4m3fn_scaled.safetensors: スケーリングされたFP8テキストエンコーダー

3. ワークフローガイド

ワークフローステップ画像
このワークフローはLoRAを使用します。対応する拡散モデルとLoRAが一致していることを確認してください。
  1. 高ノイズモデルとLoRAの読み込み
    • Load Diffusion Modelノードがwan2.2_fun_inpaint_high_noise_14B_fp8_scaled.safetensorsモデルを読み込んでいることを確認してください
    • LoraLoaderModelOnlyノードがwan2.2_i2v_lightx2v_4steps_lora_v1_high_noise.safetensorsを読み込んでいることを確認してください
  2. 低ノイズモデルとLoRAの読み込み
    • Load Diffusion Modelノードがwan2.2_fun_inpaint_low_noise_14B_fp8_scaled.safetensorsモデルを読み込んでいることを確認してください
    • LoraLoaderModelOnlyノードがwan2.2_i2v_lightx2v_4steps_lora_v1_low_noise.safetensorsを読み込んでいることを確認してください
  3. Load CLIPノードがumt5_xxl_fp8_e4m3fn_scaled.safetensorsモデルを読み込んでいることを確認してください
  4. Load VAEノードがwan_2.1_vae.safetensorsモデルを読み込んでいることを確認してください
  5. 開始フレームと終了フレームの画像を素材としてアップロードします
  6. Promptグループにプロンプトを入力します
  7. WanFunInpaintToVideoノードでサイズとビデオ長を調整します
    • widthheightパラメータを調整します。デフォルトは640です。小さめのサイズを設定していますが、必要に応じて変更できます。
    • lengthを調整します。これは総フレーム数です。現在のワークフローのfpsは16です。例えば5秒のビデオを生成したい場合は、5*16 = 80に設定します。
  8. Runボタンをクリックするか、ショートカットCtrl(Cmd)+Enterを使用してビデオ生成を実行します