Runway是一家专注于生成式AI的公司,提供强大的视频生成能力。目前,ComfyUI已集成Runway API,您可以直接在ComfyUI中使用相关节点进行视频生成。
目前,ComfyUI原生集成以下Runway视频生成模型:
生命周期终止(EOL):Runway Gen3a Turbo和Runway首尾帧转视频已于2026年7月30日结束生命周期。Runway于该日期退役了Gen-3 Alpha Turbo。相关的合作节点(RunwayImageToVideoNodeGen3a、RunwayFirstLastFrameNode)和工作流模板已弃用,不再受支持。
Runway 视频生成的优势
- 图生视频生成:
Runway Gen4 turbo 节点可根据输入图像和描述视频内容的文本提示词生成视频
- 可调节视频长度:修改
duration 参数可设置视频长度
- 可调节宽高比:修改
ratio 参数可设置视频宽高比
生命周期结束(EOL):Runway Gen3a Turbo 和 Runway 首尾帧转视频 的生命周期已于 2026年7月30日 结束。Runway 于该日期退役了 Gen-3 Alpha Turbo。相关合作节点(RunwayImageToVideoNodeGen3a、RunwayFirstLastFrameNode)及工作流模板均已弃用,不再受支持。
已退役工作流及替代方案
使用 API 节点需要保证你已经正常登录,并在受许可的网络环境下使用,请参考API 节点总览部分文档来了解使用 API 节点的具体使用要求。
请确保你的 ComfyUI 已经更新。本指南里的工作流可以在工作流模板中找到。如果找不到,可能是 ComfyUI 没有更新。如果加载工作流时有节点缺失,可能原因有:
- 你用的不是最新版(每夜版)。
- 启动时有些节点导入失败。
- Cloud 会在 ComfyUI 稳定版本发布后更新。
所以,如果你发现本文档中有任何核心节点缺失,可能是因为新核心节点尚未在最新稳定版中发布。请等待下一个稳定版发布。
Gen4 turbo 图生视频工作流
1. 工作流文件下载
以下视频的 metadata 中包含了工作流信息。请下载视频并将其拖入 ComfyUI 中,即可加载对应的工作流。
下载 JSON 格式工作流文件
下载下面的图像作为输入图像
2. 分步完成工作流执行
您可以参照图中的数字编号,完成基本的图生视频工作流执行:
- 在
Load Image 节点中,加载提供的输入图像。
- 在
Runway Gen4 turbo 节点中,设置 prompt 描述视频内容,修改 duration 参数以设置视频时长,修改 ratio 参数以设置视频宽高比。
- 点击
Run 按钮,或使用快捷键 Ctrl(cmd) + Enter 执行视频生成。
- 等待 API 返回结果之后,即可在
Save Video 节点中查看已生成的视频(右键点击保存)。相应的视频还会保存到 ComfyUI/output/ 目录中。