Skip to main content

Wan2.1 Fun Camera について

Wan2.1 Fun Camera は、アリバグループのチームが開発した動画生成プロジェクトであり、カメラの動きを制御することで動画生成の効果を調整することに重点を置いています。 モデル重みのダウンロード先: ソースコードリポジトリ: VideoX-Fun ComfyUI は現在、Wan2.1 Fun Camera モデルをネイティブ対応しています
ComfyUI が最新版に更新されていることを確認してください。このガイドで紹介するワークフローは、ワークフローテンプレートから入手できます。 テンプレート内に該当のワークフローが見つからない場合、ComfyUI のバージョンが古くなっている可能性があります。ワークフローを読み込んだ際にノードが欠落している場合の考えられる原因:
  1. 最新の ComfyUI(Nightly 版)を使用していない
  2. 起動時に一部のノードのインポートに失敗している

モデルのインストール

これらのモデルは、一度だけインストールすれば十分です。また、対応するワークフロー画像内にもモデルのダウンロード情報が記載されていますので、ご自身の好みに合わせてダウンロード方法をお選びください。 以下に示すすべてのモデルは、Wan_2.1_ComfyUI_repackaged から入手できます。

Diffusion モデル

1.3B または 14B のいずれかを選択してください:

wan2.1_fun_camera_v1.1_1.3B_bf16.safetensors

Wan2.1 Fun Camera 1.3B 拡散モデル

wan2.1_fun_camera_v1.1_14B_bf16.safetensors

Wan2.1 Fun Camera 14B 拡散モデル
以前に Wan2.1 関連のモデルをご利用になったことがある場合、以下のモデルは既にご所有である可能性があります。万が一不足している場合は、それぞれダウンロードしてください。

Text Encoders

いずれか1つを選択してください:

umt5_xxl_fp16.safetensors

フル精度テキストエンコーダー

umt5_xxl_fp8_e4m3fn_scaled.safetensors

FP8 量子化テキストエンコーダー(低 VRAM 向けに推奨)

VAE

wan_2.1_vae.safetensors

Wan2.1 VAE モデル

CLIP Vision

clip_vision_h.safetensors

CLIP vision エンコーダー
ファイルの保存場所:

ComfyUI Wan2.1 Fun Camera 1.3B ワークフロー

Wan 2.1 Fun Camera 1.3B

Wan 2.1 Fun Camera 1.3B モデルを使用して、映画のようなカメラワークでダイナミックなビデオを生成します。 Wan 2.1 Fun Camera 1.3B ワークフロープレビュー

Comfy Cloud で実行

Comfy Cloud で開く

ワークフローをダウンロード

JSON をダウンロードするか、テンプレートライブラリで「Wan 2.1 Fun Camera 1.3B」を検索してください
以下の動画をダウンロードし、ComfyUI にドラッグ&ドロップして、対応するワークフローを読み込んでください:
14B バージョンをご利用の場合は、モデルファイルを 14B バージョンに置き換えるだけでかまいませんが、VRAM の要件にご注意ください。
入力素材 このファイルを対応する LoadImage ノードにアップロードしてください:

video_wan2.1_fun_camera_v1.1_1.3B_start_image.jpg

LoadImage ノード 52 · video_wan2.1_fun_camera_v1.1_1.3B_start_image.jpg
video_wan2.1_fun_camera_v1.1_1.3B_start_image.jpg

3. ワークフローをステップ・バイ・ステップで完了する

Wan2.1 Fun Camera ワークフローステップ
  1. 正しいバージョンのモデルファイルが読み込まれていることを確認してください:
    • 1.3B バージョン:wan2.1_fun_camera_v1.1_1.3B_bf16.safetensors
    • 14B バージョン:wan2.1_fun_camera_v1.1_14B_bf16.safetensors
  2. Load CLIP ノードが umt5_xxl_fp8_e4m3fn_scaled.safetensors を読み込んでいることを確認してください
  3. Load VAE ノードが wan_2.1_vae.safetensors を読み込んでいることを確認してください
  4. Load CLIP Vision ノードが clip_vision_h.safetensors を読み込んでいることを確認してください
  5. 開始フレームを Load Image ノードにアップロードしてください
  6. 自分で用意した入力画像を使用する場合は、プロンプトを修正してください
  7. WanCameraEmbedding ノードでカメラの動きを設定してください
  8. Run ボタンをクリックするか、ショートカット Ctrl(cmd) + Enter を使用して生成を実行してください

ComfyUI Wan2.1 Fun Camera 14B ワークフロー

Wan 2.1 Fun Camera 14B

14Bフルモデルを使用して、高度なカメラ制御で高品質な動画を生成します。 Wan 2.1 Fun Camera 14B workflow preview

Comfy Cloudで実行

Comfy Cloudで開く

ワークフローをダウンロード

JSONをダウンロードするか、テンプレートライブラリで「Wan 2.1 Fun Camera 14B」を検索してください
入力素材 このファイルを該当するLoadImageノードにアップロードします:

video_wan2.1_fun_camera_v1.1_14B_start_image.jpg

LoadImageノード 52 · video_wan2.1_fun_camera_v1.1_14B_start_image.jpg
video_wan2.1_fun_camera_v1.1_14B_start_image.jpg

パフォーマンスの参考値

1.3B バージョン:
  • RTX 4090 で 512×512 解像度にて 81 フレームを生成するのに約 72 秒かかります
14B バージョン:
  • RTX4090(24GB VRAM)では、512×512 解像度での生成時に VRAM 不足が発生する可能性があります。また、A100 でより大きな解像度を使用した場合にも、VRAM 不足が報告されています