跳到正文
8月24日周一
  1. fxguide73

    Nikola Todorovic 详解 Autodesk Flow Studio 新 3D Editor 与 Canvas 工作流

    Autodesk Flow Studio 通过新的 3D Editor 与 Canvas 工作流,把可交互的三维场景调度和生成式二维视频模型结合起来,让电影制作者先控制表演、场面调度、构图与摄影机运动,再生成和细化最终画面。fxguide 采访 Wonder Dynamics 联合创始人、现任 Autodesk 成员 Nikola Todorovic;他强调该系统并非用单条 Prompt“制作一部电影”,而是把 AI 纳入可指导、可修改的制作流程。 3D Editor 可使用角色、动画、动作捕捉数据、摄影机轨迹和生成环境组装镜头。表演与摄影机运动可以分别取自不同参考视频,摄影机也可直接设置关键帧;包括由 World Labs Marble 创建的 Gaussian splat 世界在内,具备空间一致性的环境可用于 blocking、布局与摄影机设计。随后,艺术家可进入基于节点的二维环境 Canvas 生成和调整画面,由当前 AI 视频模型处理灯光融合、氛围、模拟效果和电影化收尾。三维场景不一定直接输出最终像素,而是为生成结果提供表演、调度、构图和摄影机运动约束;追求速度时也可只使用 Canvas。 Todorovic 将 Prompt 工作流的问题概括为“80/20 规则”:AI 能很快生成图像的前 80%,但在移动物体、修改表演或细化摄影机路径且保留已有成果时,最后 20% 容易变得不可预测。Flow Studio 试图借助三维指导和二维生成的组合,使这类迭代更可控,并减少模型给出统计上安全但缺乏创作特异性的结果。 该流程优先使用录制的人类表演。视频和音频可驱动角色,在生成模型改变最终外观前保留表演者的节奏与意图;Todorovic 认为,仅靠音频或描述表演的 Prompt 难以稳定地产生鲜明表演,音频驱动动画也常出现泛化的手势和表情。音频整合仍在演进,目前视频模型可在收尾阶段生成声音,Autodesk 正在探索让更多源表演音频贯穿整体流程。 Flow Studio 基于云端,3D Editor 以保持高交互性为设计目标;Canvas 的生成时间取决于所选模型、镜头长度与分辨率,世界生成目前需要数分钟。平台面向个人制作者、3至5人的团队以及更大规模的工作室。Todorovic 将 3D Editor 视为原 Wonder Dynamics 平台的下一步,后者曾组合约 25 个机器学习、计算机视觉与生成系统,将 CG 角色置入实拍素材;新编辑器则把这些原本分离的输出集中到更易使用的导演环境中。

8月11日周二
  1. fxguide61

    Impossible Objects 如何用 HP ZGX Nano 上的 AI 模型增强 VFX 制作

    洛杉矶 VFX 公司 Impossible Objects 通过本地运行的定制 AI 模型与传统 CG、2D 合成相结合,扩展广告及影视项目的制作能力;本文由 HP 赞助,相关性能与工作流效果主要来自公司成员的介绍。团队在 ComfyUI 中建立面向制作的定制流程,使用内部拍摄素材微调开源模型,并以 Foundry Nuke、Adobe After Effects、SideFX Houdini 等工具完成传统 CG 和合成。 AI 负责人 Nhan Le 表示,通用 AI 视频模型尚不能满足汽车广告对写实度的要求,完全生成的镜头也受分辨率和色彩限制,因此团队不会直接向客户交付全生成镜头,而是提取生成式 AI 的可用部分并交由传统 2D 合成控制最终效果。内部模块可根据原始镜头随时间变化的灯光生成匹配结果,减少逐帧调整;针对汽车项目,团队还会持续调整模型对素材细节的记忆,以维持镜头中的细小特征一致性。 为满足本地计算与素材安全需求,工作室新增两台集成 NVIDIA GB10 Grace Blackwell Superchip 的 HP ZGX Nano G1n。团队使用 ZGX Toolkit 将 ComfyUI 任务发送到设备,并通过背部的 200 Gbps ConnectX-7 端口连接第二台设备;据 Le 介绍,这可增加可用内存,以加载更高分辨率模型和更长的 4K 视频片段,集成后吞吐量很快提升至原来的两到三倍。本地部署也让涉及品牌 IP 和专有设计的素材不必上传至云端模型,并可从内部拍摄到模型训练全过程追踪资产来源与所有权。 在虚拟制作方面,Impossible Objects 称其方法可从 LED volume 拍摄素材中推断和计算跟踪信息,用于场景延伸及 LED 画面清理,减少过去手工提取和重新应用跟踪数据的工作。公司未来计划把多台 HP ZGX Nano 组成统一集群,连接自有 NAS,并探索由多 Agent LLM 管理内部渲染农场;这部分仍处于搭建计划阶段。