NVIDIA expande Agent Toolkit no SIGGRAPH 2026 com bibliotecas Omniverse de código aberto

Durante o SIGGRAPH 2026, a NVIDIA anunciou que seu Agent Toolkit agora inclui as bibliotecas NVIDIA Omniverse — um conjunto de componentes de software modulares e de código aberto que permitem que agentes de IA adicionem capacidades de IA física (simulação de sensores, física e validação de ativos prontos para simulação) diretamente em aplicativos 3D e industriais existentes. As bibliotecas estão disponíveis publicamente no GitHub, junto com um novo blueprint chamado "SimReady Blender" .

Novas Bibliotecas no GitHub

• ovrtx — Biblioteca de simulação de sensores RTX (pré-lançamento no GitHub). Oferece um SDK leve em C e Python para gerar saídas de câmera, lidar, radar e outros sensores a partir de cenas OpenUSD, permitindo que aplicativos e agentes de IA testem como sistemas de IA física percebem ambientes virtuais .
• ovphysx — Biblioteca de simulação física acelerada por GPU. Traz comportamento físico realista (colisões, massa, atrito, movimento) para cenas 3D, permitindo que equipes testem interações entre objetos e sistemas em simulação .
• ovstage — Runtime compartilhado para dados de cena OpenUSD, permitindo que bibliotecas como ovphysx e ovrtx troquem estados de simulação através de um substrato de dados comum .
• Skills CAD-to-SimReady — Convertem dados CAD em ativos SimReady construídos sobre OpenUSD, dando ao conteúdo 3D as propriedades estruturais, de material e físicas necessárias para simulação de IA física .

Bibliotecas complementares incluem ovstream (streaming) e ovstorage (gerenciamento de dados) .

Blueprint SimReady Blender

A NVIDIA lançou um novo blueprint para integrar as bibliotecas Omniverse no Blender, agora disponível no GitHub. Ele fornece um fluxo de trabalho de referência para desenvolvedores e artistas técnicos prepararem conteúdo 3D pronto para simulação diretamente dentro do Blender usando a pilha de bibliotecas Omniverse .

Citações de Executivos

• Jensen Huang, fundador e CEO da NVIDIA: "A era da IA física será construída primeiro em simulação. O NVIDIA Agent Toolkit com bibliotecas Omniverse traz agentes de IA para as ferramentas 3D que os desenvolvedores já usam, ajudando a construir os mundos prontos para simulação onde robôs, fábricas e sistemas autônomos são treinados e testados muito antes de chegarem ao mundo real."
• Ainda no GTC Taipei (junho de 2026), Huang afirmou: "Agentes de IA estão revolucionando o desenvolvimento de software, e essa mudança está chegando agora à IA física, estendendo-se aos sistemas que transformarão transporte, manufatura, saúde e robótica."

Primeiros Adotantes

SideFX

A SideFX está usando fluxos de trabalho OpenUSD, ovrtx e ovphysx para explorar como agentes de IA podem integrar bibliotecas Omniverse nos fluxos de criação de conteúdo 3D procedural do Houdini. Isso dá aos artistas técnicos um caminho para gerar, testar física e preparar conteúdo para simulação inteiramente dentro do Houdini.

• Kim Davidson, presidente e CEO da SideFX: "A criação 3D procedural é essencial para construir os mundos complexos e controláveis necessários para simulação, robótica e IA industrial. Com as bibliotecas NVIDIA Omniverse e OpenUSD, a SideFX está explorando como ferramentas prontas para agentes podem dar suporte aos fluxos de trabalho do Houdini, ajudando artistas técnicos a revisar, testar e preparar conteúdo procedural para simulação enquanto mantêm o controle do processo criativo."

PTC

A plataforma Onshape da PTC (CAD e gerenciamento de dados de produto) está usando OpenUSD e ovrtx para conectar fluxos de trabalho nativos em nuvem com a simulação de sensores NVIDIA RTX, permitindo capacidades "Render Studio" diretamente no navegador .

Startups

Várias startups estão entre as primeiras a adotar as bibliotecas Omniverse: ForgeCAD, Lightwheel, Moonlake AI e Palatial estão construindo com as novas bibliotecas e skills prontas para agentes para acelerar pipelines de ativos prontos para simulação e validação de IA física .

Contexto Estratégico

O anúncio estende a estratégia da NVIDIA de tornar a simulação de IA física mais acessível ao:

• Expor capacidades principais do Omniverse (renderização RTX, simulação PhysX, pipelines de dados) como APIs C standalone e headless-first com bindings para C++ e Python — sem exigir mais a plataforma Omniverse completa .
• Tornar essas bibliotecas ferramentas chamáveis por agentes dentro do Agent Toolkit, permitindo que agentes de codificação inspecionem cenas de forma autônoma, sinalizem problemas, preparem ativos e executem simulações .
• Lançar uma grande coleção de código aberto de skills para agentes de IA física (abrangendo Omniverse, Cosmos, Isaac, Metropolis, Alpamayo e Jetson) em junho de 2026 no GTC Taipei, agora estendida com o lançamento das bibliotecas Omniverse no SIGGRAPH 2026 .

O objetivo geral é reduzir a barreira para desenvolvedores que constroem os mundos prontos para simulação necessários para treinar e testar robôs, veículos autônomos, fábricas e gêmeos digitais industriais antes que cheguem ao mundo real .