NVIDIA Agent Toolkit nyní zahrnuje knihovny Omniverse – AI agenti získávají schopnost pracovat s fyzikální simulací

NVIDIA vydala několik nových knihoven v rámci balíčku Omniverse, z nichž každá přináší specifické schopnosti fyzikální AI do existujících aplikací:

• ovrtx – knihovna pro RTX simulaci senzorů (předběžná verze na GitHubu). Poskytuje odlehčené C a Python SDK pro generování dat z kamer, lidarů, radarů a dalších senzorů z OpenUSD scén. Umožňuje aplikacím a AI agentům testovat, jak fyzikální AI systémy vnímají virtuální prostředí .
• ovphysx – knihovna pro fyzikální simulaci akcelerovanou GPU. Přináší realistické fyzikální chování (kolize, hmotnost, tření, pohyb) do 3D scén, takže týmy mohou testovat interakce objektů a systémů v simulaci .
• ovstage – sdílené runtime prostředí pro OpenUSD data, umožňující knihovnám jako ovphysx a ovrtx vyměňovat si simulační stav prostřednictvím společného datového substrátu .
• CAD-to-SimReady dovednosti – převádějí CAD data na SimReady aktiva postavená na OpenUSD a dodávají 3D obsahu strukturální, materiálové a fyzikální vlastnosti potřebné pro fyzikální AI simulaci .

Mezi další podpůrné knihovny patří ovstream (streamování) a ovstorage (správa dat) .

Blueprint SimReady Blender

NVIDIA rovněž vydala nový blueprint pro integraci knihoven Omniverse do Blenderu, který je nyní k dispozici na GitHubu. Poskytuje referenční pracovní postup pro vývojáře a technické umělce, jak připravovat simulační 3D obsah přímo v Blenderu s využitím sady knihoven Omniverse .

Vyjádření vedení

Jensen Huang, zakladatel a CEO NVIDIA: „Éra fyzikální AI bude nejprve postavena v simulaci. NVIDIA Agent Toolkit s knihovnami Omniverse přivádí AI agenty do 3D nástrojů, které vývojáři už používají, a pomáhá budovat světy připravené na simulaci, kde se roboti, továrny a autonomní systémy trénují a testují dávno předtím, než vstoupí do reálného světa.“

Dříve na GTC Taipei (červen 2026) Huang uvedl: „AI agenti revolučně mění vývoj softwaru a tento posun nyní přichází do fyzikální AI, rozšiřuje se do systémů, které promění dopravu, výrobu, zdravotnictví a robotiku.“

První uživatelé

SideFX

SideFX využívá pracovní postupy OpenUSD, ovrtx a ovphysx k prozkoumání, jak mohou AI agenti integrovat knihovny Omniverse do procedurální tvorby 3D obsahu v Houdini. Technickým umělcům to otevírá cestu k vytváření, testování fyziky a přípravě obsahu pro simulaci přímo v Houdini.

Kim Davidson, prezident a CEO SideFX: „Procedurální 3D tvorba je zásadní pro budování složitých, ovladatelných světů potřebných pro simulaci, robotiku a průmyslovou AI. S knihovnami NVIDIA Omniverse a OpenUSD SideFX zkoumá, jak mohou nástroje připravené pro agenty podpořit pracovní postupy Houdini a pomoci technickým umělcům kontrolovat, testovat a připravovat procedurální obsah pro simulaci, přičemž zůstávají tvůrčímu procesu.“

PTC

Platforma Onshape od PTC pro CAD a správu produktových dat (PDM) využívá OpenUSD a ovrtx k propojení cloudových konstrukčních pracovních postupů s RTX simulací senzorů NVIDIA, čímž umožňuje funkce „Render Studio“ přímo v prohlížeči .

Startupy

Mezi prvními, kdo knihovny Omniverse adoptovaly, jsou startupy ForgeCAD, Lightwheel, Moonlake AI a Palatial. Ty budují s novými knihovnami a dovednostmi připravenými pro agenty, aby urychlily pipeline simulačních aktiv a validaci fyzikální AI .

Širší strategický kontext

Oznámení rozšiřuje strategii NVIDIA zpřístupnit fyzikální AI simulaci tím, že:

• Klíčové schopnosti Omniverse (RTX rendering, PhysX simulace, datové pipeline) jsou nyní k dispozici jako samostatná, headless-first C API s vazbami na C++ a Python – bez nutnosti spouštět celou platformu Omniverse .
• Tyto knihovny se stávají nástroji volanými agenty v rámci Agent Toolkitu, takže kódovací agenti mohou autonomně prozkoumávat scény, označovat problémy, připravovat aktiva a spouštět simulace .
• V červnu 2026 na GTC Taipei byla vydána rozsáhlá open-source kolekce dovedností fyzikální AI (zahrnující Omniverse, Cosmos, Isaac, Metropolis, Alpamayo a Jetson), nyní rozšířená o vydání knihoven Omniverse na SIGGRAPH 2026 .

Hlavním cílem je snížit bariéru pro vývojáře, kteří budují světy připravené na simulaci potřebné pro trénink a testování robotů, autonomních vozidel, továren a průmyslových digitálních dvojčat, ještě než vstoupí do reálného světa .