heygen-avatar-6 がデフォルトのエンジンです。heygen-avatar-6-turbo はより高速で安価なオプションです。
利用可能なワークフロー
写真またはビデオからビデオへ
1枚の写真、スタイライズされたキャラクターの短いビデオ、またはその両方を、自分のオーディオで話すクリップに変換します。レンダーの長さはオーディオによって決まります。- 写真はアイデンティティとシーンを設定します。最初のフレームとしては使用されません。モデルがポーズを再構成するため、腕を組んだ写真はポーズを変えて返されます。
- 参照ビデオはキャラクターの話し方や動きを示すもので、長さは最低2秒です。より長いクリップは最初の30秒にトリミングされます。実在の人物を写したビデオは拒否されます。代わりにその人物の写真を接続してください。
- オーディオの長さは1.5秒から10分までです。
Comfy Cloud で実行
Comfy Cloud で開く
ワークフローをダウンロード
JSON をダウンロードするか、テンプレートライブラリで “HeyGen Avatar 6: Photo to Video” を検索してください
pink_hair_portrait.png
image 入力に読み込むavatar6_narration.mp3
audio 入力に読み込むアイデンティティからビデオへ
撮影なしでプレゼンターをレンダリングします。ストックのルックまたは自分で作成したアバターを選び、セリフを書き、ボイスを選択します。speech が script のときは何も接続する必要はありません。audio のときは Load Audio ノードを audio 入力に接続してください。
speech には2つのモードがあります。script はセリフを text(最大5000文字)に書き込み、選択した voice で読み上げます。任意で voice_speed の倍率を指定できます。audio は0.5秒から10分までの自分のクリップを使用し、クリップの長さがレンダーの長さになります。
Comfy Cloud で実行
Comfy Cloud で開く
ワークフローをダウンロード
JSON をダウンロードするか、テンプレートライブラリで “HeyGen Avatar 6: Identity to Video” を検索してください
string_a のプレフィックスを消すか、作成ノードの出力から生の ID をコピーしてください:
- Avatar:
sourceをphotoに設定したHeyGen Create Avatarがルック ID を返します。メインノードでavatarをcustom avatarに設定し、その ID をcustom_avatar_idに貼り付けます。pink_hair_portrait.pngはテンプレートに同梱されています。 - Voice:
HeyGen Voice 1.0 Instant Cloneは、少なくとも10秒のクリーンな単一話者のオーディオからボイス ID を返します。それをcustom_voice_idに貼り付けてください。空でない限り、voiceドロップダウンを上書きします。avatar6_voice_sample.mp3はテンプレートに同梱されています。
ノードのコントロール
Reference to Video は画像、ビデオ、またはその両方を接続する必要があります。Identity to Video は
script モードでは入力の接続が不要で、audio モードではオーディオ入力が必要です。
プロンプトのヒント
motion_promptで演技を指示する。アバターがどのように話し、動くかを指定します。キーワードに合わせたジェスチャー、リラックスした肩、わずかな首の傾き、カメラへのゆっくりとしたプッシュインなどです。ニュートラルな演出にしたい場合は空のままにします。- フレームがタイトなときはジェスチャーを小さくする。頭と肩のクロップでは
motion_expressivenessをlessに設定します。大きなジェスチャーはフレームからはみ出してしまうためです。 - クリーンな単一話者のオーディオを使う。背景音楽や2人目の声がトラックに含まれていると、リップシンクに現れてしまいます。ボイスクローンなら、10秒の連続した発話で十分です。
- 写真は接続する前にフレーミングする。
autoは写真の形状を維持するため、後からフレーミングし直すのではなく、希望するアスペクト比にクロップしてください。
はじめる
- ComfyUIを最新バージョンにアップデートする
- テンプレートライブラリに移動し、
HeyGen Avatar 6を検索する