NVIDIA представила Omniverse бібліотеки в Agent Toolkit: що це означає для розробників та індустрії

На SIGGRAPH 2026 компанія NVIDIA оголосила, що її Agent Toolkit тепер включає бібліотеки NVIDIA Omniverse — набір модульних, відкритих програмних компонентів, які надають AI-агентам можливість додавати можливості фізичного ШІ (симуляцію сенсорів, фізику та валідацію активів, готових до симуляції) безпосередньо до існуючих 3D- та промислових застосунків. Бібліотеки доступні на GitHub разом із новим blueprint «SimReady Blender» .

Ключові оголошення

Нові бібліотеки на GitHub

• ovrtx — бібліотека симуляції RTX-сенсорів (попередня версія на GitHub). Надає легкий C та Python SDK для генерації даних з камер, лідарів, радарів та інших сенсорів зі сцен OpenUSD, дозволяючи застосункам та AI-агентам тестувати, як системи фізичного ШІ сприймають віртуальне середовище .
• ovphysx — бібліотека фізичної симуляції з прискоренням на GPU. Додає реалістичну фізичну поведінку (зіткнення, масу, тертя, рух) до 3D-сцен, щоб команди могли тестувати взаємодію об'єктів та систем у симуляції .
• ovstage — спільний runtime для даних сцени OpenUSD, що дозволяє бібліотекам, як-от ovphysx та ovrtx, обмінюватися станом симуляції через єдину підкладку даних .
• CAD-to-SimReady skills — навички для перетворення CAD-даних на SimReady-активи на основі OpenUSD, надаючи 3D-контенту структурні, матеріальні та фізичні властивості, необхідні для симуляції фізичного ШІ .

Додаткові бібліотеки в стеку: ovstream (потокова передача) та ovstorage (управління даними) .

Blueprint «SimReady Blender»

NVIDIA випустила новий blueprint для інтеграції бібліотек Omniverse в Blender, доступний на GitHub. Він надає еталонний робочий процес для розробників та технічних художників, які хочуть готувати 3D-контент, готовий до симуляції, безпосередньо в Blender .

Цитати керівництва NVIDIA

• Дженсен Хуанг, засновник і CEO NVIDIA: «Ера фізичного ШІ спочатку будуватиметься в симуляції. NVIDIA Agent Toolkit з бібліотеками Omniverse привносить AI-агентів у 3D-інструменти, якими вже користуються розробники, допомагаючи створювати готові до симуляції світи, де роботи, фабрики та автономні системи навчаються та тестуються задовго до того, як потраплять у реальний світ.»
• Раніше на GTC Taipei (червень 2026) Хуанг заявив: «AI-агенти революціонізують розробку програмного забезпечення, і цей зсув тепер поширюється на фізичний ШІ, проникаючи в системи, які трансформують транспорт, виробництво, охорону здоров'я та робототехніку.»

Ранні користувачі

SideFX

SideFX використовує робочі процеси OpenUSD, ovrtx та ovphysx, щоб дослідити, як AI-агенти можуть інтегрувати бібліотеки Omniverse у процедурне 3D-моделювання в Houdini. Це дає технічним художникам шлях до генерації, тестування фізики та підготовки контенту для симуляції повністю в Houdini.

• Кім Девідсон, президент і CEO SideFX: «Процедурне 3D-моделювання є ключовим для створення складних, контрольованих світів, необхідних для симуляції, робототехніки та промислового ШІ. Завдяки бібліотекам NVIDIA Omniverse та OpenUSD SideFX досліджує, як інструменти, готові до роботи з агентами, можуть підтримувати робочі процеси Houdini, допомагаючи технічним художникам перевіряти, тестувати та готувати процедурний контент для симуляції, залишаючись при цьому під контролем творчого процесу.»

PTC

Платформа Onshape від PTC для CAD та управління даними про продукт (PDM) використовує OpenUSD та ovrtx для підключення хмарних робочих процесів до симуляції RTX-сенсорів NVIDIA, забезпечуючи можливості «Render Studio» безпосередньо в браузері .

Стартапи

Серед перших, хто впровадив бібліотеки Omniverse, — стартапи ForgeCAD, Lightwheel, Moonlake AI та Palatial, які використовують нові бібліотеки та навички для прискорення конвеєрів активів, готових до симуляції, та валідації фізичного ШІ .

Ширший стратегічний контекст

Оголошення продовжує стратегію NVIDIA щодо зробити симуляцію фізичного ШІ більш доступною шляхом:

• Надання ключових можливостей Omniverse (рендеринг RTX, симуляція PhysX, конвеєри даних) у вигляді автономних, розрахованих на headless C API з обгортками C++ та Python — без необхідності використання повної платформи Omniverse .
• Перетворення цих бібліотек на інструменти, доступні для виклику агентами, в рамках Agent Toolkit, так що кодувальні агенти можуть автономно переглядати сцени, виявляти проблеми, готувати активи та запускати симуляції .
• Випуску великої колекції навичок для агентів фізичного ШІ з відкритим кодом (охоплює Omniverse, Cosmos, Isaac, Metropolis, Alpamayo та Jetson) у червні 2026 на GTC Taipei, яку тепер розширено випуском бібліотек Omniverse на SIGGRAPH 2026 .

Головна мета — знизити бар'єр для розробників, які створюють готові до симуляції світи для навчання та тестування роботів, автономних транспортних засобів, фабрик та промислових цифрових двійників до їхнього впровадження в реальний світ .