メインコンテンツへスキップ
Runway は、生成AIに特化した企業であり、強力な動画生成機能を提供しています。現在、ComfyUI には Runway API が統合されており、関連ノードを ComfyUI 上で直接利用して動画を生成できます。 現在、ComfyUI では以下の Runway 動画生成モデルがネイティブ対応しています:
  • Runway Gen3a turbo
  • Runway Gen4 turbo
  • Runway First Last Frame to video
APIノードを使用するには、正しくログインしていることと、許可されたネットワーク環境で使用していることを確認する必要があります。APIノードの使用に必要な具体的な要件については、ドキュメントの「APIノードの概要」セクションをご参照ください。
ComfyUI が最新版に更新されていることを確認してください。このガイドで紹介するワークフローは、ワークフローテンプレートから入手できます。
テンプレート内に該当のワークフローが見つからない場合、ComfyUI のバージョンが古くなっている可能性があります。(デスクトップ版の更新は若干遅れることがあります)
ワークフローを読み込んだ際にノードが欠落している場合の主な原因:
  1. 最新の ComfyUI(Nightly 版)を使用していない
  2. 起動時に一部のノードのインポートに失敗している

Gen3a turbo 画像→動画ワークフロー

1. ワークフローファイルのダウンロード

以下の動画の metadata にはワークフロー情報が含まれています。ダウンロード後、ComfyUI へドラッグ&ドロップすることで、対応するワークフローを読み込むことができます。

JSON形式ワークフローファイルをダウンロード

以下の画像を入力画像としてダウンロードしてください。 ComfyUI Runway gen3a turbo 画像→動画 入力画像

2. ワークフロー実行手順(ステップバイステップ)

ComfyUI Runway gen3a turbo 画像→動画 手順ガイド 画像中の番号を参考に、基本的な画像→動画ワークフローを実行してください。
  1. Load Image ノードで、提供された入力画像を読み込みます。
  2. Runway Gen3a turbo ノードで、動画内容を記述する prompt を設定し、動画長を指定する duration パラメーターと、アスペクト比を指定する ratio パラメーターをそれぞれ調整します。
  3. Run ボタンをクリックするか、ショートカットキー Ctrl(macOS の場合は Cmd)+ Enter を押して動画生成を実行します。
  4. API からの結果が返ってくるまで待ち、生成された動画を Save Video ノードで確認します(右クリックで保存可能)。また、対応する動画ファイルは ComfyUI/output/ ディレクトリにも自動保存されます。

Gen4 turbo 画像→動画ワークフロー

1. ワークフローファイルのダウンロード

以下の動画の metadata にはワークフロー情報が含まれています。ダウンロード後、ComfyUI へドラッグ&ドロップすることで、対応するワークフローを読み込むことができます。

JSON形式ワークフローファイルをダウンロード

以下の画像を入力画像としてダウンロードしてください。 ComfyUI Runway gen4 turbo 画像→動画 入力画像

2. ワークフロー実行手順(ステップバイステップ)

ComfyUI Runway gen4 turbo 画像→動画 手順ガイド 画像中の番号を参考に、基本的な画像→動画ワークフローを実行してください。
  1. Load Image ノードで、提供された入力画像を読み込みます。
  2. Runway Gen4 turbo ノードで、動画内容を記述する prompt を設定し、動画長を指定する duration パラメーターと、アスペクト比を指定する ratio パラメーターをそれぞれ調整します。
  3. Run ボタンをクリックするか、ショートカットキー Ctrl(macOS の場合は Cmd)+ Enter を押して動画生成を実行します。
  4. API からの結果が返ってくるまで待ち、生成された動画を Save Video ノードで確認します(右クリックで保存可能)。また、対応する動画ファイルは ComfyUI/output/ ディレクトリにも自動保存されます。

先頭・末尾フレームから動画生成するワークフロー

1. ワークフローファイルのダウンロード

以下の動画の metadata にはワークフロー情報が含まれています。ダウンロード後、ComfyUI へドラッグ&ドロップすることで、対応するワークフローを読み込むことができます。

JSON形式ワークフローファイルをダウンロード

以下の画像を入力画像としてダウンロードしてください。 ComfyUI Runway gen4 turbo 画像→動画 入力画像 ComfyUI Runway gen4 turbo 画像→動画 入力画像

2. ワークフロー実行手順(ステップバイステップ)

ComfyUI Runway gen4 turbo 画像→動画 手順ガイド 画像中の番号を参考に、先頭・末尾フレームから動画を生成する基本ワークフローを実行してください。
  1. Load Image ノードで、先頭フレーム(開始フレーム)を読み込みます。
  2. Load Image ノードで、末尾フレーム(終了フレーム)を読み込みます。
  3. Runway First-Last-Frame to Video ノードで、動画内容を記述する prompt を設定し、動画長を指定する duration パラメーターと、アスペクト比を指定する ratio パラメーターをそれぞれ調整します。
  4. Run ボタンをクリックするか、ショートカットキー Ctrl(macOS の場合は Cmd)+ Enter を押して動画生成を実行します。
  5. API からの結果が返ってくるまで待ち、生成された動画を Save Video ノードで確認します(右クリックで保存可能)。また、対応する動画ファイルは ComfyUI/output/ ディレクトリにも自動保存されます。