AI 视频生成最难控制的往往是镜头:让画面"动起来"容易,让镜头按你想要的方式运动很难。ComfyUI 官方发布的一套工作流换了个思路:先用 Blender 做一段简单的 3D 动画作为运动引导(Motion Guide),再用一张参考图注入画面风格与细节,最后交给 Seedance 2.0 生成风格化视频。基础 3D 动效负责"运动可控",参考图负责"风格一致",两者分工明确。

Blender 动效引导 + 参考图风格化 + Seedance 2.0 输出的演示片段(竖屏)

一、这套工作流的思路

  • 运动引导:在 Blender 里用基础几何体或简单角色摆一段动画,定义镜头轨迹、运镜节奏与主体运动;
  • 风格注入:准备一张风格参考图(可以是概念图、插画或实拍静帧),工作流会把它的色调、质感与细节"迁移"到输出画面;
  • 模型生成:Seedance 2.0 依据 3D 动效与参考图生成最终视频,相当于"3D 管运镜、AI 管画面"。

二、上手步骤

  1. 在 Blender 中制作一段简单的 3D 动画(不需要复杂建模,基础形状即可);
  2. 准备一张风格参考图,建议与目标画面比例一致;
  3. 打开官方工作流文件:cloud.comfy.org 工作流分享页(云端打开需注册 ComfyUI 账号,也可在本地 ComfyUI 中加载同一工作流);
  4. 按节点说明接入参考图与动效输入,配置 Seedance 2.0 相关参数;
  5. 生成后根据结果迭代:动效越清晰、参考图风格越明确,输出越稳定。

三、成本与边界

  • 本地运行:ComfyUI 工作流需要在本地部署运行,对显卡显存与内存有要求,配置不足时建议使用云端实例;
  • 模型费用:Seedance 2.0 通过 API 或云服务调用通常按量计费,实际成本取决于生成次数、时长与分辨率;
  • 账号与平台:cloud.comfy.org 云端打开工作流需要注册账号,免费额度与计费规则以官方页面为准;
  • 许可与版权:工作流本身由 ComfyUI 官方发布;Seedance 模型的商用授权按官方条款执行;参考图与 3D 素材请确保拥有版权或已获得授权;
  • 效果差异:不同版本的模型对 3D 引导的理解不同,首次使用建议小规模试跑,再按输出调整参数。

这套工作流的价值在于把"镜头可控"从玄学变成可复现的流程:想拍什么运镜,先在 3D 里摆出来,剩下的风格化交给模型。对做 AI 短片、广告分镜与内容创作的同学,是一条值得收藏的官方路径。