Foundry 发布 SmartRoto,以 AI 辅助 Nuke 转描关键帧制作
Foundry 发布面向 Nuke、NukeX、Nuke Studio 和 Nuke Indie 的 AI 插件 SmartRoto,用于在保留艺术家样条设计与控制权的前提下,加速转描关键帧制作。它不会自动创建完整样条,也不是围绕分割蒙版描出轮廓的自动抠像工具;艺术家仍需在主体清晰可见的画面上将其拆分为合理的关节化形状,SmartRoto 负责让这些样条随序列中的主体移动、变形。年订阅价格为 499 美元,提供节点锁定与浮动许可证。 工作流区分两类关键帧。模型预测的是 smart keys,艺术家创建或修正的是 user keys;后者被视为确定依据,不会被覆盖。艺术家先在初始帧创建形状,再选择主体变化明显的画面建立关键帧,然后让 SmartRoto 为所选形状生成 smart key。若预测存在偏差,调整后的画面会成为锁定的 user key,再次运行模型时,修正信息会影响周围范围。控制粒度细化到单个形状,因此同一帧可以同时包含 user keys 与 smart keys。工具既可处理整段序列,也可限定输入、自定义或入出点范围,并提供关键帧精简工具,寻找可由插值表达的运动区间。 Foundry 表示,该系统既不依赖光流,也不从图像分割蒙版反推轮廓,而是依据图像特征直接传播样条,并利用多个形状之间的空间关系作为约束。样条仍可编辑且具备亚像素精度,也可按常规方式为生成的蒙版渲染运动模糊。模型接受过含运动模糊画面的训练,严重模糊时可能需要更多手动关键帧;部分遮挡可以处理,完全遮挡仍需设置形状生命周期。外观相同的角色也可能被混淆。 该项目约四年前在 Foundry 内部重新启动,模型和训练数据由研究团队从头构建;Foundry 称训练素材均获许可,模型可用于商业工作,全部运算在本地完成,不向云端传输数据。显存需求随分辨率和同时跟踪的形状数量变化,约需 8GB VRAM,高分辨率及大量形状会需要更多。 最终测试邀请专业转描艺术家在两周内分别使用普通 Nuke 与 SmartRoto 处理多种镜头,并随机安排工具使用顺序。第二周结束时最高达到 4 倍速度,但 Foundry 产品负责人 Adam Cherbetji 称该数字偏高,更稳定的结果是完成同一镜头约快 2 倍,且经常高于这一水平。文章还将其与 SIGGRAPH 2026 的 RotoShop 对比:RotoShop 从 SAMv2 等模型的分割蒙版拟合姿态绑定的 Bézier 样条,SmartRoto 则绕过蒙版,直接根据图像特征传播艺术家创建的样条;两种路线都把可编辑、高精度样条作为 VFX 转描的最终交付物。
推荐理由:文章结合工作流拆解与专业艺术家测试,说明可编辑样条驱动的 AI 转描如何减少关键帧劳动及其适用边界。