NVIDIA erweitert Agent Toolkit um Omniverse-Bibliotheken: Physische KI für Entwickler wird zugänglicher

Weitere unterstützende Bibliotheken im Stack sind ovstream (Streaming) und ovstorage (Datenmanagement) .

SimReady Blender-Blueprint

NVIDIA hat einen neuen Blueprint zur Integration der Omniverse-Bibliotheken in Blender veröffentlicht, der jetzt auf GitHub verfügbar ist. Er bietet einen Referenz-Workflow für Entwickler und technische Künstler, um simulationsbereite 3D-Inhalte direkt in Blender mit dem Omniverse-Bibliotheksstack zu erstellen .

Zitate der Führungsebene

• Jensen Huang, Gründer und CEO von NVIDIA: „Die Ära der physischen KI wird zuerst in der Simulation gebaut werden. Der NVIDIA Agent Toolkit mit den Omniverse-Bibliotheken bringt KI-Agenten in die 3D-Tools, die Entwickler bereits verwenden, und hilft dabei, die simulationsbereiten Welten zu erschaffen, in denen Roboter, Fabriken und autonome Systeme trainiert und getestet werden, lange bevor sie die reale Welt erreichen.“
• Bereits auf der GTC Taipei (Juni 2026) erklärte Huang: „KI-Agenten revolutionieren die Softwareentwicklung, und dieser Wandel kommt jetzt zur physischen KI und erstreckt sich auf die Systeme, die Transport, Fertigung, Gesundheitswesen und Robotik verändern werden.“

Erste Anwender

SideFX

SideFX nutzt OpenUSD-Workflows, ovrtx und ovphysx, um zu erkunden, wie KI-Agenten Omniverse-Bibliotheken in die prozeduralen 3D-Content-Erstellungs-Workflows von Houdini integrieren können. Dies bietet technischen Künstlern einen Weg, Inhalte für die Simulation vollständig innerhalb von Houdini zu generieren, auf Physik zu testen und vorzubereiten.

• Kim Davidson, Präsident und CEO von SideFX: „Die prozedurale 3D-Erstellung ist unerlässlich für den Bau der komplexen, steuerbaren Welten, die für Simulation, Robotik und industrielle KI benötigt werden. Mit den NVIDIA Omniverse-Bibliotheken und OpenUSD untersucht SideFX, wie agentenbereite Tools Houdini-Workflows unterstützen können, um technischen Künstlern zu helfen, prozedurale Inhalte für die Simulation zu überprüfen, zu testen und vorzubereiten, während sie die Kontrolle über den kreativen Prozess behalten.“

PTC

Die Onshape-CAD- und Produktdatenmanagement-Plattform (PDM) von PTC nutzt OpenUSD und ovrtx, um cloud-native Design-Workflows mit der NVIDIA RTX-Sensorensimulation zu verbinden und „Render Studio“-Funktionen direkt im Browser zu ermöglichen .

Startups

Mehrere Startups gehören zu den ersten, die die Omniverse-Bibliotheken übernehmen: ForgeCAD, Lightwheel, Moonlake AI und Palatial bauen mit den neuen agentenbereiten Bibliotheken und Fähigkeiten, um simulationsbereite Asset-Pipelines und die Validierung physischer KI zu beschleunigen .

Strategischer Kontext

Die Ankündigung erweitert die Strategie von NVIDIA, die physische KI-Simulation zugänglicher zu machen, indem:

• Kernfunktionen von Omniverse (RTX-Rendering, PhysX-Simulation, Datenpipelines) als eigenständige, headless-first C-APIs mit C++- und Python-Bindungen bereitgestellt werden – ohne dass die vollständige Omniverse-Plattform erforderlich ist .
• Diese Bibliotheken zu agentenaufrufbaren Werkzeugen im Agent Toolkit gemacht werden, sodass Code-Agenten autonom Szenen inspizieren, Probleme markieren, Assets vorbereiten und Simulationen ausführen können .
• Eine umfangreiche Open-Source-Sammlung von Fähigkeiten für physische KI-Agenten (für Omniverse, Cosmos, Isaac, Metropolis, Alpamayo und Jetson) bereits im Juni 2026 auf der GTC Taipei veröffentlicht wurde und nun durch die Veröffentlichung der Omniverse-Bibliotheken auf der SIGGRAPH 2026 erweitert wird .

Das übergeordnete Ziel ist es, die Hürden für Entwickler zu senken, die die simulationsbereiten Welten bauen, die zum Trainieren und Testen von Robotern, autonomen Fahrzeugen, Fabriken und industriellen digitalen Zwillingen benötigt werden, bevor sie in der realen Welt eingesetzt werden .