NVIDIA Expande Agent Toolkit com Bibliotecas Omniverse na SIGGRAPH 2026: Novas Ferramentas Open Source no GitHub, Capacidades e Primeiros Adotantes

Novas Bibliotecas Lançadas no GitHub

A NVIDIA lançou várias novas bibliotecas como parte do pacote Omniverse, cada uma projetada para trazer capacidades específicas de IA física para aplicativos existentes:

• ovrtx — Biblioteca de simulação de sensores RTX (pré-lançamento no GitHub). Ela fornece um SDK leve em C e Python para gerar saídas de sensores como câmera, lidar, radar e outros a partir de cenas OpenUSD, permitindo que aplicativos e agentes de IA testem como os sistemas de IA física percebem ambientes virtuais .
• ovphysx — Biblioteca de simulação física acelerada por GPU. Ela traz comportamento físico realista (colisões, massa, atrito, movimento) para cenas 3D, permitindo que equipes testem interações entre objetos e sistemas em simulação .
• ovstage — Runtime compartilhado para dados de cena OpenUSD, permitindo que bibliotecas como ovphysx e ovrtx troquem estado de simulação por meio de um substrato de dados comum .
• Habilidades CAD-to-SimReady — Convertem dados CAD em ativos SimReady construídos sobre OpenUSD, dando ao conteúdo 3D as propriedades estruturais, de material e físicas necessárias para a simulação de IA física .

Bibliotecas de suporte adicionais incluem ovstream (streaming) e ovstorage (gerenciamento de dados) .

Blueprint SimReady Blender

A NVIDIA também lançou um novo blueprint para integrar as bibliotecas Omniverse no Blender, agora disponível no GitHub. Ele fornece um fluxo de trabalho de referência para desenvolvedores e artistas técnicos prepararem conteúdo 3D pronto para simulação diretamente dentro do Blender usando o pacote de bibliotecas Omniverse .

Citações da Diretoria

Jensen Huang, fundador e CEO da NVIDIA: "A era da IA física será construída primeiro em simulação. O NVIDIA Agent Toolkit com as bibliotecas Omniverse traz agentes de IA para as ferramentas 3D que os desenvolvedores já usam, ajudando a construir os mundos prontos para simulação onde robôs, fábricas e sistemas autônomos são treinados e testados muito antes de chegarem ao mundo real."

Mais cedo, na GTC Taipei (junho de 2026), Huang afirmou: "Os agentes de IA estão revolucionando o desenvolvimento de software, e essa mudança está chegando agora à IA física, estendendo-se aos sistemas que transformarão transporte, manufatura, saúde e robótica."

Primeiros Adotantes

SideFX

A SideFX está usando fluxos de trabalho OpenUSD, ovrtx e ovphysx para explorar como agentes de IA podem integrar as bibliotecas Omniverse nos fluxos de trabalho de criação de conteúdo 3D procedural do Houdini. Isso dá aos artistas técnicos um caminho para gerar, testar física e preparar conteúdo para simulação inteiramente dentro do Houdini.

Kim Davidson, presidente e CEO da SideFX: "A criação 3D procedural é essencial para construir os mundos complexos e controláveis necessários para simulação, robótica e IA industrial. Com as bibliotecas NVIDIA Omniverse e o OpenUSD, a SideFX está explorando como ferramentas prontas para agentes podem apoiar os fluxos de trabalho do Houdini, ajudando artistas técnicos a revisar, testar e preparar conteúdo procedural para simulação, mantendo o controle do processo criativo."

PTC

A plataforma Onshape da PTC (CAD e gerenciamento de dados de produto — PDM) está usando OpenUSD e ovrtx para conectar fluxos de trabalho de design nativos em nuvem com a simulação de sensores RTX da NVIDIA, permitindo capacidades de "Render Studio" diretamente no navegador .

Startups

Várias startups estão entre as primeiras a adotar as bibliotecas Omniverse: ForgeCAD, Lightwheel, Moonlake AI e Palatial estão construindo com as novas bibliotecas e habilidades prontas para agentes para acelerar pipelines de ativos prontos para simulação e validação de IA física .

Contexto Estratégico Mais Amplo

O anúncio estende a estratégia da NVIDIA de tornar a simulação de IA física mais acessível ao:

• Expor os principais recursos do Omniverse (renderização RTX, simulação PhysX, pipelines de dados) como APIs C standalone e headless-first com bindings C++ e Python — não exigindo mais a plataforma completa do Omniverse .
• Tornar essas bibliotecas ferramentas que podem ser chamadas por agentes dentro do Agent Toolkit, para que agentes de codificação possam inspecionar cenas de forma autônoma, sinalizar problemas, preparar ativos e executar simulações .
• Lançar uma grande coleção open source de habilidades de agentes de IA física (abrangendo Omniverse, Cosmos, Isaac, Metropolis, Alpamayo e Jetson) em junho de 2026 na GTC Taipei, agora estendida com o lançamento das bibliotecas Omniverse na SIGGRAPH 2026 .

O objetivo geral é reduzir a barreira para desenvolvedores que constroem os mundos prontos para simulação necessários para treinar e testar robôs, veículos autônomos, fábricas e gêmeos digitais industriais antes que eles cheguem ao mundo real .