NVIDIA在SIGGRAPH 2026宣布：Agent Toolkit集成Omniverse库，通过GitHub开源助力物理AI模拟

在SIGGRAPH 2026上，NVIDIA宣布其 Agent Toolkit 现在包含了 NVIDIA Omniverse库——一套模块化、开源软件组件。这些组件能让AI代理直接将物理AI能力（如传感器模拟、物理模拟和模拟就绪资产验证）集成到现有3D和工业应用中。这些库和一个新的"SimReady Blender"蓝图已在GitHub上开放获取 。

在GitHub上发布的新库

NVIDIA发布了一系列作为Omniverse栈一部分的新库，每个库都旨在将特定的物理AI能力引入现有应用：

• ovrtx —— RTX传感器模拟库（已在GitHub上预发布）。它提供了一个轻量级的C和Python SDK，用于从OpenUSD场景生成摄像头、激光雷达、雷达及其他传感器输出，使应用和AI代理能够测试物理AI系统如何感知虚拟环境 。
• ovphysx —— GPU加速的物理模拟库。它为3D场景带来逼真的物理行为（碰撞、质量、摩擦力、运动），使团队能在模拟中测试物体和系统的交互 。
• ovstage —— 用于OpenUSD场景数据的共享运行时阶段，使ovphysx和ovrtx等库能通过一个公共数据子层交换模拟状态 。
• CAD到SimReady技能 —— 将CAD数据转换为基于OpenUSD的SimReady资产，赋予3D内容物理AI模拟所需的结构、材质和物理属性 。

其他辅助库包括 ovstream（流处理）和 ovstorage（数据管理）。

SimReady Blender蓝图

NVIDIA还发布了一个新的蓝图，用于将Omniverse库集成到 Blender 中，现已在GitHub上提供。它为开发者和技术美术提供了一个参考工作流，使他们能够直接在Blender中使用Omniverse库栈准备模拟就绪的3D内容 。

高管表态

黄仁勋（Jensen Huang），NVIDIA创始人兼CEO："物理AI时代将首先在模拟中构建。NVIDIA Agent Toolkit与Omniverse库将AI代理带入开发者已经使用的3D工具中，帮助构建模拟就绪的世界，让机器人、工厂和自主系统在到达现实世界之前就能在模拟中接受训练和测试。"

更早之前，在2026年6月的GTC台北大会上，黄仁勋表示："AI代理正在彻底改变软件开发，这一转变现在正延伸到物理AI领域，进入将改变交通、制造、医疗和机器人技术的系统。"

早期采用者

SideFX

SideFX正在使用OpenUSD工作流、ovrtx和ovphysx，探索AI代理如何将Omniverse库集成到 Houdini 程序化3D内容创建工作流中。这为技术美术提供了一条在Houdini内部生成、测试物理并准备模拟内容的途径。

Kim Davidson，SideFX总裁兼CEO："程序化3D创建对于构建模拟、机器人和工业AI所需的复杂、可控世界至关重要。通过NVIDIA Omniverse库和OpenUSD，SideFX正在探索代理就绪工具如何支持Houdini工作流，帮助技术美术在保持对创作过程控制的同时审查、测试和准备程序化内容以用于模拟。"

PTC

PTC的 Onshape CAD和产品数据管理（PDM）平台正在使用OpenUSD和ovrtx，将云端原生设计工作流与NVIDIA RTX传感器模拟连接起来，直接在浏览器中实现"Render Studio"功能 。

初创公司

多家初创公司是首批采用Omniverse库的：ForgeCAD、Lightwheel、Moonlake AI 和 Palatial 正在使用这些新的代理就绪库和技能，以加速模拟就绪资产管道和物理AI验证 。

更广泛的战略背景

这一公告扩展了NVIDIA使物理AI模拟更易访问的战略，具体方式包括：

• 将核心Omniverse能力（RTX渲染、PhysX模拟、数据管道）作为 独立的、优先支持无头模式的C API（附带C++和Python绑定） 开放——不再需要完整Omniverse平台 。
• 将这些库作为 可被代理调用的工具 集成到Agent Toolkit中，从而使编码代理能够自主检查场景、标记问题、准备资产并运行模拟 。
• 在2026年6月的GTC台北大会上发布了一个主要的开源物理AI代理 技能 集合（涵盖Omniverse、Cosmos、Isaac、Metropolis、Alpamayo和Jetson），现在通过SIGGRAPH 2026的Omniverse库发布进行了扩展 。

总体目标是降低开发者构建模拟就绪世界的门槛，这些世界用于在机器人、自动驾驶汽车、工厂和工业数字孪生到达现实世界之前对其进行训练和测试 。