Skip to main content
Grok Imagine Video 是 xAI 的视频生成系列,可通过 Grok 合作节点在 ComfyUI 中使用。它涵盖从文本或图像生成视频、视频编辑、无缝视频扩展,以及由角色或风格图像引导的参考生视频。 有关最新模型,请参阅 Grok Imagine Video 1.5
使用 API 节点需要保证你已经正常登录,并在受许可的网络环境下使用,请参考API 节点总览部分文档来了解使用 API 节点的具体使用要求。
请确保你的 ComfyUI 已经更新。本指南里的工作流可以在工作流模板中找到。如果找不到,可能是 ComfyUI 没有更新。如果加载工作流时有节点缺失,可能原因有:
  1. 你用的不是最新版(每夜版)。
  2. 启动时有些节点导入失败。

Grok:视频生成

根据文本提示词生成短视频,并可选择附带起始图像。该工作流使用 grok-imagine-video 模型生成最长 15 秒、带同步音频的片段。

在 Comfy Cloud 上运行

在 Comfy Cloud 中打开

下载工作流

下载 JSON,或在模板库中搜索 “Grok Imagine”

工作流总览

该工作流使用三个节点:
  • LoadImage:提供可选的起始图像帧
  • GrokVideoNode:核心节点,配置为使用 grok-imagine-video 模型
  • SaveVideo:保存已生成的视频及音频

运行步骤

  1. 输入提示词:在 GrokVideoNode 中描述运动、氛围和场景动态
  2. (可选)加载起始图像:将图像连接到 LoadImage 节点
  3. 设置分辨率480p720p
  4. 设置时长:选择 1 到 15 秒的长度
  5. 设置种子:控制节点是否重新运行;无论种子如何,输出结果都不可复现
  6. 点击队列:按 Ctrl+Enter 生成

Grok:视频编辑

使用自然语言指令编辑上传的视频。重新设计画面风格、更改场景设置或应用新的美学风格,同时保留原始动态和内容。

在 Comfy Cloud 上运行

在 Comfy Cloud 中打开

下载工作流

下载 JSON 或在模板库中搜索”Grok Imagine”

工作流总览

此工作流使用三个节点:
  • LoadVideo:提供要编辑的来源视频
  • GrokVideoEditNode:核心节点,配置了 grok-imagine-video 模型
  • SaveVideo:保存编辑后的视频

运行步骤

  1. 加载视频:将你的视频连接到 LoadVideo 节点(1 到 8.7 秒,最大 50MB)
  2. 描述编辑需求:在 GrokVideoEditNode 的提示中告诉模型如何变换画面
  3. 点击队列:按 Ctrl+Enter 生成

Grok:视频扩展

以无缝衔接的续写扩展短视频。用自然语言描述下一个场景,模型会生成一段接续原始画面的新视频片段。

在 Comfy Cloud 上运行

在 Comfy Cloud 中打开

下载工作流

下载 JSON,或在模板库中搜索“Grok Imagine”

工作流总览

此工作流使用以下三个节点:
  • LoadVideo:提供要扩展的源视频
  • GrokVideoExtendNode:核心节点,配置为使用 grok-imagine-video 模型
  • SaveVideo:保存扩展后的视频

运行步骤

  1. 加载视频:将您的视频连接到 LoadVideo 节点(MP4,2 到 15 秒,最大 50MB)
  2. 描述下一个场景:在 GrokVideoExtendNode 的提示词中告诉模型接下来应该发生什么
  3. 设置时长:选择扩展长度(2 到 10 秒)
  4. 点击队列:按下 Ctrl+Enter 生成

Grok:参考图到视频

根据最多 7 张参考图像生成视频。使用角色、产品或风格参考来保持主体一致,同时提示词描述动作和场景。

在 Comfy Cloud 上运行

在 Comfy Cloud 中打开

下载工作流

下载 JSON,或在模板库中搜索“Grok Imagine”

工作流总览

该工作流使用四个节点:
  • LoadImage x2:提供角色和物体参考图像
  • GrokVideoReferenceNode:核心节点,配置了 grok-imagine-video 模型和参考图像
  • SaveVideo:保存已生成的视频

运行步骤

  1. 加载参考图:将最多 7 张参考图像连接到 LoadImage 节点
  2. 输入提示词:在 GrokVideoReferenceNode 中描述场景、动作以及参考图的呈现方式
  3. 设置分辨率480p720p
  4. 设置宽高比:从 16:99:16 中选择
  5. 设置时长:选择 2 至 10 秒之间的时长
  6. 点击“队列”:按 Ctrl+Enter 生成