NVIDIA:s Agent Toolkit får Omniverse-bibliotek – AI-agenter kan nu bygga simuleringsvärldar

Ytterligare stödbibliotek inkluderar ovstream (strömning) och ovstorage (datahantering) .

SimReady Blender-ritning

NVIDIA släppte också en ny ritning för att integrera Omniverse-bibliotek i Blender, nu tillgänglig på GitHub. Den ger ett referensarbetsflöde för utvecklare och tekniska konstnärer att förbereda simuleringsklart 3D-innehåll direkt i Blender med hjälp av Omniverse-biblioteksstacken .

Ledande citat

Jensen Huang, grundare och VD för NVIDIA: "Den fysiska AI-eran kommer att byggas i simulering först. NVIDIA Agent Toolkit med Omniverse-bibliotek för in AI-agenter i de 3D-verktyg som utvecklare redan använder, och hjälper till att bygga de simuleringsklara världar där robotar, fabriker och autonoma system tränas och testas långt innan de når den verkliga världen."

Tidigare på GTC Taipei (juni 2026) sade Huang: "AI-agenter revolutionerar mjukvaruutveckling, och den förändringen kommer nu till fysisk AI, och sträcker sig till system som kommer att förändra transport, tillverkning, sjukvård och robotik."

Tidiga användare

SideFX

SideFX använder OpenUSD-arbetsflöden, ovrtx och ovphysx för att utforska hur AI-agenter kan integrera Omniverse-bibliotek i Houdini-arbetsflöden för procedurellt 3D-innehåll. Detta ger tekniska konstnärer en väg att generera, testa fysik och förbereda innehåll för simulering helt i Houdini.

Kim Davidson, president och VD för SideFX: "Procedurellt 3D-skapande är avgörande för att bygga de komplexa, kontrollerbara världar som behövs för simulering, robotik och industriell AI. Med NVIDIA Omniverse-bibliotek och OpenUSD utforskar SideFX hur agentredo verktyg kan stödja Houdini-arbetsflöden, och hjälper tekniska konstnärer att granska, testa och förbereda procedurellt innehåll för simulering samtidigt som de behåller kontrollen över den kreativa processen."

PTC

PTC:s Onshape CAD- och produktdatahanteringsplattform (PDM) använder OpenUSD och ovrtx för att koppla molnbaserade designarbetsflöden med NVIDIA RTX-sensorsimulering, vilket möjliggör "Render Studio"-funktioner direkt i webbläsaren .

Startups

Flera startups är bland de första att anta Omniverse-bibliotek: ForgeCAD, Lightwheel, Moonlake AI och Palatial bygger med de nya agentredo biblioteken och färdigheterna för att påskynda simuleringsklara tillgångspipelines och fysisk AI-validering .

Bredare strategisk kontext

Tillkännagivandet förlänger NVIDIA:s strategi att göra fysisk AI-simulering mer tillgänglig genom att:

• Exponera centrala Omniverse-funktioner (RTX-rendering, PhysX-simulering, datapipelines) som fristående, headless-första C-API:er med C++- och Python-bindningar – som inte längre kräver hela Omniverse-plattformen .
• Göra dessa bibliotek till agentanropsbara verktyg inom Agent Toolkit, så att kodagenter autonomt kan inspektera scener, flagga problem, förbereda tillgångar och köra simuleringar .
• Släppa en stor samling öppen källkod av fysiska AI-agent färdigheter (som spänner över Omniverse, Cosmos, Isaac, Metropolis, Alpamayo och Jetson) i juni 2026 på GTC Taipei, nu utökad med SIGGRAPH 2026-släppet av Omniverse-bibliotek .

Det övergripande målet är att sänka tröskeln för utvecklare som bygger de simuleringsklara världar som behövs för att träna och testa robotar, autonoma fordon, fabriker och industriella digitala tvillingar innan de når den verkliga världen .