NVIDIA lleva la simulación de IA física a más desarrolladores con las bibliotecas Omniverse en su Agent Toolkit

En SIGGRAPH 2026, NVIDIA anunció que su Agent Toolkit ahora incluye las bibliotecas NVIDIA Omniverse, un conjunto de componentes de software modulares y de código abierto que otorgan a los agentes de IA la capacidad de añadir funcionalidades de IA física (simulación de sensores, física y validación de activos listos para simulación) directamente en aplicaciones 3D e industriales existentes. Las bibliotecas están disponibles de forma abierta en GitHub, junto con un nuevo "SimReady Blender" blueprint .

Nuevas bibliotecas publicadas en GitHub

NVIDIA lanzó varias bibliotecas nuevas como parte del stack Omniverse, cada una diseñada para aportar capacidades específicas de IA física a aplicaciones existentes:

• ovrtx — Biblioteca de simulación de sensores RTX (prelanzamiento en GitHub). Proporciona un SDK ligero en C y Python para generar salidas de sensores como cámaras, LiDAR, radar y otros a partir de escenas OpenUSD, permitiendo que aplicaciones y agentes de IA prueben cómo los sistemas de IA física perciben entornos virtuales .
• ovphysx — Biblioteca de simulación física acelerada por GPU. Aporta un comportamiento físico realista (colisiones, masa, fricción, movimiento) a escenas 3D, permitiendo a los equipos probar interacciones entre objetos y sistemas en simulación .
• ovstage — Escenario de ejecución compartido para datos de escena OpenUSD, que permite que bibliotecas como ovphysx y ovrtx intercambien el estado de la simulación a través de un sustrato de datos común .
• Habilidades CAD-to-SimReady — Convierten datos CAD en activos SimReady construidos sobre OpenUSD, dotando al contenido 3D de las propiedades estructurales, de material y físicas necesarias para la simulación de IA física .

Otras bibliotecas de soporte incluyen ovstream (streaming) y ovstorage (gestión de datos) .

Blueprint SimReady para Blender

NVIDIA también lanzó un nuevo blueprint para integrar las bibliotecas Omniverse en Blender, ahora disponible en GitHub. Proporciona un flujo de trabajo de referencia para que desarrolladores y artistas técnicos preparen contenido 3D listo para simulación directamente dentro de Blender usando el stack de bibliotecas Omniverse .

Declaraciones de ejecutivos

Jensen Huang, fundador y CEO de NVIDIA: "La era de la IA física se construirá primero en simulación. NVIDIA Agent Toolkit con las bibliotecas Omniverse lleva a los agentes de IA a las herramientas 3D que los desarrolladores ya usan, ayudando a construir los mundos listos para simulación donde se entrenan y prueban robots, fábricas y sistemas autónomos mucho antes de que lleguen al mundo real."

Anteriormente, en GTC Taipei (junio de 2026), Huang declaró: "Los agentes de IA están revolucionando el desarrollo de software, y ese cambio ahora llega a la IA física, extendiéndose a los sistemas que transformarán el transporte, la fabricación, la atención médica y la robótica."

Primeros adoptantes

SideFX

SideFX está utilizando flujos de trabajo OpenUSD, ovrtx y ovphysx para explorar cómo los agentes de IA pueden integrar las bibliotecas Omniverse en los flujos de trabajo de creación de contenido 3D procedural de Houdini. Esto brinda a los artistas técnicos una ruta para generar, probar la física y preparar contenido para simulación completamente dentro de Houdini.

Kim Davidson, presidente y CEO de SideFX: "La creación 3D procedural es esencial para construir los mundos complejos y controlables necesarios para la simulación, la robótica y la IA industrial. Con las bibliotecas NVIDIA Omniverse y OpenUSD, SideFX está explorando cómo las herramientas listas para agentes pueden respaldar los flujos de trabajo de Houdini, ayudando a los artistas técnicos a revisar, probar y preparar contenido procedural para simulación mientras mantienen el control del proceso creativo."

PTC

La plataforma CAD y de gestión de datos de producto (PDM) Onshape de PTC está utilizando OpenUSD y ovrtx para conectar flujos de trabajo de diseño nativos en la nube con la simulación de sensores RTX de NVIDIA, habilitando capacidades de "Render Studio" directamente en el navegador .

Startups

Varias startups se encuentran entre las primeras en adoptar las bibliotecas Omniverse: ForgeCAD, Lightwheel, Moonlake AI y Palatial están construyendo con las nuevas bibliotecas y habilidades listas para agentes para acelerar los pipelines de activos listos para simulación y la validación de IA física .

Contexto estratégico más amplio

El anuncio extiende la estrategia de NVIDIA de hacer la simulación de IA física más accesible al:

• Exponer las capacidades principales de Omniverse (renderizado RTX, simulación PhysX, pipelines de datos) como APIs C independientes y sin interfaz gráfica, con enlaces a C++ y Python, que ya no requieren la plataforma Omniverse completa .
• Convertir estas bibliotecas en herramientas invocables por agentes dentro del Agent Toolkit, permitiendo que los agentes de codificación inspeccionen escenas, señalen problemas, preparen activos y ejecuten simulaciones de forma autónoma .
• Lanzar una importante colección de código abierto de habilidades de agentes de IA física (que abarcan Omniverse, Cosmos, Isaac, Metropolis, Alpamayo y Jetson) en junio de 2026 en GTC Taipei, que ahora se amplía con el lanzamiento de las bibliotecas Omniverse en SIGGRAPH 2026 .

El objetivo general es reducir la barrera para los desarrolladores que construyen los mundos listos para simulación necesarios para entrenar y probar robots, vehículos autónomos, fábricas y gemelos digitales industriales antes de que lleguen al mundo real .