借助生成式 AI 赋能的 OpenUSD 工作流实现大规模电影级内容制作

制作广告需要大量资源，需要在实体位置以及各种道具和布景下，在不同的场景和环境中展示产品，以便更准确地定位消费者。这种传统流程不仅昂贵且耗时，而且还会对实体环境造成破坏，并在回家后无法捕捉新的角度。

越来越多的组织正在通过开发可增强灵活性和创造力的 3D 配置器解决方案，来克服这些障碍。产品配置器解决方案由通用场景描述（Universal Scene Description）和生成式 AI 开发，可帮助广告公司大规模创建超个性化广告内容。

为了展示生成式 AI 支持的配置器如何增强复杂的设计流程，NVIDIA 创意团队在NVIDIA Omniverse上开发了一款名为 CineBuilder 的工具。使用 OpenUSD 和生成式 AI，CineBuilder 简化了高质量电影级内容的合成、生成和制作，适用于汽车广告等用例。

此工作流可用于从概念的初始扩展到完全配置的 30 秒广告。借助此工作流，创意团队可以根据生活方式、首选配件、汽车颜色，甚至是一天中基于天气的区域和时间，为受众定制广告。

视频 1. 使用 OpenUSD 和 Omniverse API 开发下一代 3D 产品配置器

使用 OpenUSD 开发模块化、可扩展的管线

CineBuilder 作为 Omniverse 的扩展而构建，有助于轻松换掉和重新配置数字资产或电影场景的各个部分。

基于OpenUSD的开发流程使这一切成为可能，该流程使团队能够将数字资产分割成不同的组件，例如模型、材质和环境，每个组件位于不同的层上。通过建立这些层，团队可以使用 CineBuilder 在统一的数字环境中无缝交换不同的元素，而不会影响整体配置。

为了使 CineBuilder 成为功能强大、快速且准确的场景构建引擎，开发团队使用高度组织化的模式和层次结构在 OpenUSD 工作流中构建了数据。OpenUSD 启用的模块化数据结构可以轻松地以多种方式分解资产，然后使用合成引擎将它们整合到自定义合成中。

OpenUSD 工作流还可以快速、非破坏性地操作和更改数据，而不会影响其他团队成员的工作。

集成生成式 AI 以加快生产

自动执行重复性任务可实现定制内容的大规模制作和管理，从而使艺术家能够更专注于创意工作。这样做的结果是制作流程更快、更高效，所需资源和时间也更少。

为了实现制作流程各个方面的自动化，该团队将大量生成式 AI 功能集成到工作流中。这些功能可以作为艺术家的 AI 助手，支持创建各种虚拟集、生成支持资产和制作照明场景等任务。

借助 NVIDIA Edify NIM 微服务实现文本转 360 HDRi，艺术家可以根据简单的文本提示（例如“蓝色夏季天空”）创建天幕来为场景提供照明，实现无限的照明场景。

图 1. NVIDIA Edify NIM 微服务用于文本转 360 HDRi 的实际应用

借助 Edify 提供支持的文本转 3D 功能，艺术家可以通过生成适用于其环境的辅助资产来更高效地装饰场景。对于面向户外冒险者的汽车广告，这些生成的对象可能是阿尔卑斯路边的树木或村舍。

生成式 AI 还能为 Omniverse Viewport 提供眼睛、耳朵和大脑，为制作流程做出贡献。通过将 Omniverse 连接到 ChatGPT 的定制 AI 智能体，团队可以使用语音命令来控制任务，例如放大和缩小以及为镜头设置 f-stop。

NeVA Machine Vision 提供 LLM 视觉辅助，可自然地描述屏幕上看到的内容。BLIP Vision 的集成支持实时物体检测，因此用户可以使用语音命令来操作场景，例如“旋转站在路边的情侣”。

最后，生成式 AI 用于根据每个配置和目标市场的独特元素定制脚本。

大规模提供高质量内容

为了展示其配置器解决方案的强大功能，NVIDIA 的创意团队着手测试生成 30 秒汽车广告的规模。结果在 4K 分辨率和 60 FPS 下实现了 630 种独特的商业配置。这相当于 315 分钟的独特 CG 渲染内容，相当于在 24 FPS 下制作七部故事片。

以下视频展示了所制作的一些独特配置：

视频 2. 客户商用汽车配置器 – 落基山脉

视频 3. 客户商用汽车配置器 – 沿海

视频 4. 客户商用汽车配置器 – 阿尔卑斯山

开发配置器解决方案的最佳实践

开发产品配置器解决方案 是一个复杂的过程，涉及从定义范围和目标到部署和集成的多个战略步骤。以下是一些帮助您入门的一般步骤：

• 定义范围和目标：这对于为配置器的功能设定明确的目标和期望至关重要，尤其是在高效处理多个商业变体方面。
• 建立模块化流程：配置器解决方案应灵活且可扩展。这就是为什么开发能够处理大量可以动态交换或重新配置的资产和元素的流程至关重要。OpenUSD 的使用在这方面发挥着关键作用，因为它使团队能够以非破坏性和高效的方式管理复杂的场景和资产。
• 与 Omniverse 集成：这为实时协作和模拟提供了必要的环境和工具。Omniverse 支持 USD 文件的无缝交换，并有助于在生产流程的不同团队和阶段进行实时更新和更改。
• 构建配置器逻辑：配置器的核心是开发支持用户自定义和生成商业变体的逻辑。用户可以根据输入或预定义场景交换环境、汽车模型和其他配件等元素。
• 设计用户界面和体验：设计直观的用户界面对于确保配置器可供没有技术专业知识的艺术家轻松使用至关重要。该界面应为用户提供清晰的自定义选项和实时预览他们的作品。
• 测试和改进：在部署之前，配置器经过了严格的测试，以识别任何错误或性能问题。根据测试用户的反馈改进了用户体验，确保最终产品稳健且用户友好。
• 部署和集成：配置器可以部署在商业环境中，并将其与现有的营销和广告工作流程集成。此阶段需要与最终用户密切合作，以确保配置器满足其需求，并可无缝集成到其日常运营中。

详细了解生成式 AI 和 OpenUSD

使用 OpenUSD 的工作流和定制工具能够高效地创建独特的广告变体。这样，您就可以在几秒钟内轻松地更改汽车材质、零件、配件和 3D 场景环境。生成式 AI 进一步增强了这些工作流，支持创建无限的照明场景和从简单的文本提示中提供支持资产。

要开始开发您自己的产品配置器解决方案，请参阅以下资源：

• 产品配置器参考架构
• https://resources.nvidia.com/en-us-omniverse-product-configurator/ov-product-configura
• 端到端配置器示例指南
• https://docs.omniverse.nvidia.com/auto-config/latest/index.html
• 用例：3D 产品配置器
• https://www.nvidia.cn/use-cases/3d-product-configurator/