NVIDIA Lancar Perpustakaan Omniverse Agent Toolkit di SIGGRAPH 2026: AI Fizikal Jadi Lebih Mudah Diakses

Di SIGGRAPH 2026, NVIDIA mengumumkan bahawa Agent Toolkit mereka kini merangkumi perpustakaan NVIDIA Omniverse — satu koleksi komponen perisian modular dan sumber terbuka yang membolehkan ejen AI menambah keupayaan AI fizikal (simulasi sensor, fizik, dan pengesahan aset sedia simulasi) terus ke dalam aplikasi 3D dan perindustrian sedia ada. Perpustakaan ini tersedia secara terbuka di GitHub, bersama-sama blueprint baharu "SimReady Blender" .

Pengumuman Utama

Perpustakaan Baharu di GitHub

• ovrtx — Perpustakaan simulasi sensor RTX (pratonton di GitHub). Menyediakan SDK ringan dalam C dan Python untuk menjana output sensor seperti kamera, lidar, radar, dan lain-lain dari scene OpenUSD, membolehkan aplikasi dan ejen AI menguji bagaimana sistem AI fizikal melihat persekitaran maya .
• ovphysx — Perpustakaan simulasi fizik yang dipercepatkan GPU. Membawa tingkah laku fizikal realistik (perlanggaran, jisim, geseran, gerakan) ke scene 3D supaya pasukan boleh menguji interaksi objek dan sistem dalam simulasi .
• ovstage — Pentas runtime kongsi untuk data scene OpenUSD, membolehkan perpustakaan seperti ovphysx dan ovrtx bertukar-tukar keadaan simulasi melalui substrat data yang sama .
• Kemahiran CAD-to-SimReady — Menukar data CAD kepada aset SimReady yang dibina di atas OpenUSD, memberikan kandungan 3D sifat struktur, material, dan fizikal yang diperlukan untuk simulasi AI fizikal .

Perpustakaan sokongan lain termasuk ovstream (penstriman) dan ovstorage (pengurusan data) .

Blueprint SimReady Blender

NVIDIA turut mengeluarkan blueprint baharu untuk mengintegrasikan perpustakaan Omniverse ke dalam Blender, kini tersedia di GitHub. Ia menyediakan aliran kerja rujukan untuk pembangun dan artis teknikal menyediakan kandungan 3D sedia simulasi terus dalam Blender menggunakan perpustakaan Omniverse .

Kata-Kata Eksekutif NVIDIA

• Jensen Huang, pengasas dan CEO NVIDIA: "Era AI fizikal akan dibina dalam simulasi terlebih dahulu. Agent Toolkit NVIDIA dengan perpustakaan Omniverse membawa ejen AI ke dalam alat 3D yang sudah digunakan pembangun, membantu membina dunia sedia simulasi di mana robot, kilang dan sistem autonomi dilatih dan diuji lama sebelum ia sampai ke dunia sebenar."
• Lebih awal di GTC Taipei (Jun 2026), Huang menyatakan: "Ejen AI merevolusikan pembangunan perisian, dan peralihan itu kini datang ke AI fizikal, meluas ke dalam sistem yang akan mengubah pengangkutan, pembuatan, penjagaan kesihatan dan robotik."

Pengguna Awal

SideFX

SideFX menggunakan aliran kerja OpenUSD, ovrtx, dan ovphysx untuk meneroka bagaimana ejen AI boleh mengintegrasikan perpustakaan Omniverse ke dalam aliran kerja penciptaan kandungan 3D prosedural Houdini. Ini memberi laluan kepada artis teknikal untuk menjana, menguji fizik, dan menyediakan kandungan untuk simulasi sepenuhnya dalam Houdini.

• Kim Davidson, presiden dan CEO SideFX: "Penciptaan 3D prosedural adalah penting untuk membina dunia kompleks dan terkawal yang diperlukan untuk simulasi, robotik dan AI industri. Dengan perpustakaan NVIDIA Omniverse dan OpenUSD, SideFX sedang meneroka bagaimana alat sedia ejen boleh menyokong aliran kerja Houdini, membantu artis teknikal menyemak, menguji dan menyediakan kandungan prosedural untuk simulasi sambil kekal mengawal proses kreatif."

PTC

Platform Onshape CAD dan pengurusan data produk (PDM) PTC menggunakan OpenUSD dan ovrtx untuk menghubungkan aliran kerja reka bentuk asli awan dengan simulasi sensor RTX NVIDIA, membolehkan keupayaan "Render Studio" terus dalam pelayar .

Syarikat Permulaan

Beberapa syarikat permulaan antara yang pertama menggunakan perpustakaan Omniverse: ForgeCAD, Lightwheel, Moonlake AI, dan Palatial membina dengan perpustakaan dan kemahiran sedia ejen baharu untuk mempercepatkan saluran paip aset sedia simulasi dan pengesahan AI fizikal .

Konteks Strategik Lebih Luas

Pengumuman ini memperluas strategi NVIDIA untuk menjadikan simulasi AI fizikal lebih mudah diakses dengan:

• Mendedahkan keupayaan teras Omniverse (rendering RTX, simulasi PhysX, saluran paip data) sebagai API C yang berdiri sendiri dan tanpa antara muka utama dengan ikatan C++ dan Python — tidak lagi memerlukan platform Omniverse penuh .
• Menjadikan perpustakaan ini sebagai alat yang boleh dipanggil ejen dalam Agent Toolkit, supaya ejen pengekodan boleh secara autonomi memeriksa scene, menanda isu, menyediakan aset, dan menjalankan simulasi .
• Mengeluarkan koleksi sumber terbuka besar kemahiran ejen AI fizikal (merangkumi Omniverse, Cosmos, Isaac, Metropolis, Alpamayo, dan Jetson) pada Jun 2026 di GTC Taipei, kini diperluas dengan keluaran perpustakaan Omniverse SIGGRAPH 2026 .

Matlamat keseluruhan adalah untuk menurunkan halangan bagi pembangun membina dunia sedia simulasi yang diperlukan untuk melatih dan menguji robot, kenderaan autonomi, kilang, dan kembar digital industri sebelum ia sampai ke dunia sebenar .