我用 WorkBuddy 调度 3D 预演给 AI 视频上"运镜锁"：先渲控制帧，再让模型照着走

第 6 篇 ｜ 标题：我用 WorkBuddy 调度 3D 预演给 AI 视频上"运镜锁"：先渲控制帧，再让模型照着走

我用 WorkBuddy 调度 3D 预演给 AI 视频上"运镜锁"：先渲控制帧，再让模型照着走① 点这里复制标题

② 鼠标在下面正文任意位置点一下 → 按 Ctrl+A → 按 Ctrl+C； ③ 去社区编辑器按 Ctrl+V； ④ 图片若没跟过去，从文件夹 shots_pack\第6篇_3D预演 里按顺序拖 4 张进来。

写在前面

AI 视频最不可控的是运镜。

写"镜头绕着人物转 90 度"，出来的可能是原地摆动；写"侧面 55 度推近"，它可能给你一个正面特写——因为文字描述压不过参考图的构图。我试过加角度、加距离、加机位术语，效果都不稳定。

后来我换了个思路：别用文字描述镜头，用画面规定镜头。

具体做法是先做一遍 3D 预演：在 3D 软件里把场景、人物站位、相机路径全部摆好，渲出关键帧图，再把这些图交给 AI 视频模型当"锚点"——空间和镜头由我定，画面质感交给 AI。

这套流程我用 WorkBuddy 全程调度（建场景、渲帧、组生成图、提交、验收），跑通了从简单运镜到打斗动作戏的多个难度档位。下面是完整做法。

一、输入材料

【配图：Blender 预演渲染截图 —— 发布时拖入】

Blender预演渲染

二、WorkBuddy 配置

• 联动技能：把"3D 预演怎么渲控制帧""控制帧怎么接进生成图""锚点密度怎么定"写成技能，触发词设成"3D 预演、控制帧、运镜、锚定、动作戏"。
• 自动化脚本：一条命令完成"渲控制帧 → 组装生成图 → 提交 → 盯成片落盘"，带断点续跑（已成功的镜头自动跳过）。
• 资产调研记录：把可用资产库（免费可商用的动作库、场景库、HDRI 环境贴图）列成清单存进技能，避免每次重新找。
• 项目记忆：记录"这套管线跑什么、什么情况必须改用别的方法"的分工边界。

【配图：出片与素材目录截图 —— 发布时拖入】

出片与素材目录

三、操作步骤

步骤 1：先想相机，再摆道具（最省事的一条规矩）

我踩过一次很贵的坑：先把场景搭得很满，再设计相机路径，结果相机转到一半直接嵌进墙里——墙面离镜头只剩 0.1 米，整批控制帧全部报废。

所以现在的顺序固定是：

1. 先定相机要走的弧线半径和高度；
2. 检查场景里任何物体到轨道圆心的距离 > 半径 + 0.5 米；
3. 最后才摆道具与人物。

诊断手法也很实用：把那面可疑的墙设成"不渲染"再渲一遍，两图对照立刻定位——不用猜。

步骤 2：渲三类控制帧

渲帧时统一分辨率与比例，帧图直接放进生成环境的输入目录。

【配图：首中尾控制帧示例图 —— 发布时拖入】

首中尾控制帧

步骤 3：把控制帧接进生成图

• 首帧 + 尾帧接对应的两个输入口，模型在这两点之间插值；
• 中段帧走"任意帧锚定"入口，可以串联多个（这是弧线运镜的关键：官方接口支持把锚点一个个串起来）；
• ⚠️ 接线有个极易错的地方：锚定节点只输出"条件"，不动画面潜变量。采样器的潜变量必须接回"图像转视频"那个节点的出口，锚定条件走自己的出口。接错了会直接报错。

步骤 4：锚点密度——动作越复杂，钉子越密

这是我实测出来的最实用的一条规律：

锚点间隔超过约 30 帧（1.25 秒），画面里的道具就可能开始"漂移"（形状变、外观变）。同一个打斗镜头，3 个锚点时道具在中段变成了一个完全不同的异物；补到 4 个锚点后，漂移彻底消失。

所以我的经验值是：普通镜头每 30~40 帧一个锚点；动作戏每 20~30 帧一个锚点。

步骤 5：动作戏——不要手 K 肢体，用动作库拼接

我一开始手动给肢体打关键帧，很快撞到天花板：三四个关键帧只够演一次挥拳，做不出成套打斗。

后来换成行业标准做法：现成角色 + 动作捕捉库 + 剪辑式拼接：

• 从免费可商用的动作库里挑动作（近战、出拳、受击、闪避这些都成套）；
• 在 3D 软件里用"非线性动画"方式把动作首尾相接拼成一段，多条之间自动过渡；
• 动作锚点钉在"两段动作的衔接帧"上——那里最容易崩；
• 相机用"侧前方弧线"跟拍，不要正面对称机位（道具会正好挡住主体）。

步骤 6：验收

渲完控制帧、生成完视频，按固定项核：首帧是否逐像素贴合 / 尾帧构图是否贴合 / 中段锚点是否在正确秒位生效 / 音轨是否正常 / 全轴有没有文字。全部通过才算这条镜头可用。

四、产出物

1. 控制帧图集（首/中/尾，按镜头归档）；
2. 成片（镜头路径与空间由控制帧锁定，画面质感由模型补全）；
3. 可复用 3D 模板：场景 + 相机 rig + 渲染脚本，正式镜头复制改参数即可；
4. 资产与调研清单：免费可商用的模型库、动作库、环境贴图清单。

五、实测难度档位（这套方法的适用范围）

【配图：成片抽帧复核截图 —— 发布时拖入】

成片抽帧复核

六、踩坑记录

1. 相机路径只允许定义在一处：旋转角度同时写在世界坐标和轴心 rig 上，会反向叠加变成来回漂移。
2. 别对单个骨架应用缩放：从动作库导入的模型常是厘米单位，"整体缩放"会让它飞出去一百倍。
3. 导入的骨架默认是四元数旋转：直接设欧拉角无效，要先改旋转模式，否则会误判成"模型朝向不对"。
4. 清空场景会连默认灯光一起删掉：不补灯渲出来是全黑。
5. 运镜先验净空（见步骤 1，这条最贵）。
6. 下载资产优先找代码托管平台的镜像：素材站限速严重时，镜像能快上百倍。

写在最后

一句话概括这套方法：把"描述镜头"换成"规定镜头"。

文字负责内容与情绪，3D 预演负责空间与运动。分工清楚之后，AI 视频里最不受控的那一环——运镜——就变成了可控项。

而且在预演阶段改镜头是零成本的：在 3D 里转一下相机比重新生成十条视频便宜得多。问题要在预演里解决，不要在出片之后返工。

有问题欢迎评论区交流。