Nikola Todorovic 详解 Autodesk Flow Studio 新 3D Editor 与 Canvas 工作流
Autodesk Flow Studio 通过新的 3D Editor 与 Canvas 工作流,把可交互的三维场景调度和生成式二维视频模型结合起来,让电影制作者先控制表演、场面调度、构图与摄影机运动,再生成和细化最终画面。fxguide 采访 Wonder Dynamics 联合创始人、现任 Autodesk 成员 Nikola Todorovic;他强调该系统并非用单条 Prompt“制作一部电影”,而是把 AI 纳入可指导、可修改的制作流程。 3D Editor 可使用角色、动画、动作捕捉数据、摄影机轨迹和生成环境组装镜头。表演与摄影机运动可以分别取自不同参考视频,摄影机也可直接设置关键帧;包括由 World Labs Marble 创建的 Gaussian splat 世界在内,具备空间一致性的环境可用于 blocking、布局与摄影机设计。随后,艺术家可进入基于节点的二维环境 Canvas 生成和调整画面,由当前 AI 视频模型处理灯光融合、氛围、模拟效果和电影化收尾。三维场景不一定直接输出最终像素,而是为生成结果提供表演、调度、构图和摄影机运动约束;追求速度时也可只使用 Canvas。 Todorovic 将 Prompt 工作流的问题概括为“80/20 规则”:AI 能很快生成图像的前 80%,但在移动物体、修改表演或细化摄影机路径且保留已有成果时,最后 20% 容易变得不可预测。Flow Studio 试图借助三维指导和二维生成的组合,使这类迭代更可控,并减少模型给出统计上安全但缺乏创作特异性的结果。 该流程优先使用录制的人类表演。视频和音频可驱动角色,在生成模型改变最终外观前保留表演者的节奏与意图;Todorovic 认为,仅靠音频或描述表演的 Prompt 难以稳定地产生鲜明表演,音频驱动动画也常出现泛化的手势和表情。音频整合仍在演进,目前视频模型可在收尾阶段生成声音,Autodesk 正在探索让更多源表演音频贯穿整体流程。 Flow Studio 基于云端,3D Editor 以保持高交互性为设计目标;Canvas 的生成时间取决于所选模型、镜头长度与分辨率,世界生成目前需要数分钟。平台面向个人制作者、3至5人的团队以及更大规模的工作室。Todorovic 将 3D Editor 视为原 Wonder Dynamics 平台的下一步,后者曾组合约 25 个机器学习、计算机视觉与生成系统,将 CG 角色置入实拍素材;新编辑器则把这些原本分离的输出集中到更易使用的导演环境中。