Pixal3D 画像からモデルへの ComfyUI ワークフロー例

​

Pixal3D: 画像からモデルへ

​

仕組み

1. 背景除去: BiRefNet が入力画像の背景を除去し、ワークフローは被写体を中央の 1024×1024 キャンバスに切り取ります。スイッチで背景除去をスキップできます
2. カメラ推定: MoGe が画像からジオメトリとカメラの画角を推定します。画角がピクセルアライン条件付けを駆動します
3. 構造生成: スパースな構造潜在変数がサンプリングされ、ボクセルにデコードされて、粗いメッシュに変換されます
4. シェイプの精緻化: シェイプステージとアップサンプルステージが、ターゲット解像度 (1536) までメッシュを精緻化します
5. テクスチャ生成: テクスチャ拡散ステージが PBR マテリアルのボクセル (ベースカラー、メタリック、ラフネス) を生成します
6. 後処理: DC リメッシュ、QEM デシメーション、UV アンラップ、ベースカラー・法線・アンビエントオクルージョンマップのベイクを行い、最終的なテクスチャ付きメッシュを作成します

​

実行手順

1. 画像を読み込む: LoadImage ノードを使用して、オブジェクトの画像を1枚読み込みます
2. ワークフローをキューに投入する: Ctrl（macOS では Cmd）+ Enter キーを押します
3. パイプラインを待つ: 構造、形状、テクスチャの各ステージが順番に実行され、その後、後処理が続きます
4. 結果を確認する: Preview3DAdvanced ノードでメッシュを確認します。GLB は ComfyUI/output/3d/ComfyUI/ に保存されます

​

モデルのダウンロード

​

モデルの保存場所

📂 ComfyUI/
├── 📂 models/
│   ├── 📂 diffusion_models/
│   │      ├── trellis_2_int8_convrot.safetensors
│   │      └── pixal3d_int8_convrot.safetensors
│   ├── 📂 vae/
│   │      ├── trellis_2_shape_vae_bf16.safetensors
│   │      └── trellis_2_texture_vae_bf16.safetensors
│   ├── 📂 clip_vision/
│   │      └── dino_v3_L_naf_fp32.safetensors
│   ├── 📂 geometry_estimation/
│   │      └── moge_2_vitl_normal_fp16.safetensors
│   └── 📂 background_removal/
│          └── birefnet.safetensors