NVIDIA, SIGGRAPH 2026에서 에이전트 툴킷과 옴니버스 라이브러리 통합 발표

SIGGRAPH 2026에서 NVIDIA는 AI 에이전트 툴킷(Agent Toolkit) 이제 옴니버스 라이브러리(Omniverse libraries) — AI 에이전트가 기존 3D 및 산업용 애플리케이션에 물리 AI 기능(센서 시뮬레이션, 물리엔진, 시뮬레이션 가능한 에셋 검증)을 직접 추가할 수 있는 모듈형 오픈소스 소프트웨어 구성 요소 모음을 포함한다고 발표했습니다. 라이브러리는 새로운 'SimReady Blender' 블루프린트와 함께 깃허브에서 누구나 자유롭게 사용할 수 있습니다 .

주요 발표 내용

깃허브에 공개된 새로운 라이브러리

• ovrtx — RTX 센서 시뮬레이션 라이브러리(깃허브 프리릴리스). 오픈USD(OpenUSD) 장면에서 카메라, 라이다, 레이더 등 다양한 센서 출력을 생성할 수 있는 경량 C 및 Python SDK를 제공합니다. 애플리케이션과 AI 에이전트가 물리 AI 시스템이 가상 환경을 어떻게 인식하는지 테스트할 수 있게 해줍니다 .
• ovphysx — GPU 가속 물리 시뮬레이션 라이브러리. 충돌, 질량, 마찰, 움직임 등 현실적인 물리적 거동을 3D 장면에 구현하여 팀이 시뮬레이션에서 객체와 시스템의 상호 작용을 테스트할 수 있게 합니다 .
• ovstage — 오픈USD 장면 데이터를 위한 공유 런타임 스테이지. ovphysx와 ovrtx 같은 라이브러리가 공통 데이터 기반을 통해 시뮬레이션 상태를 교환할 수 있게 합니다 .
• CAD-to-SimReady 기술 — CAD 데이터를 오픈USD 기반 SimReady 에셋으로 변환하여 3D 콘텐츠에 물리 AI 시뮬레이션에 필요한 구조적, 재질적, 물리적 속성을 부여합니다 .

지원 라이브러리로는 ovstream(스트리밍)과 ovstorage(데이터 관리)도 포함됩니다 .

SimReady Blender 블루프린트

NVIDIA는 옴니버스 라이브러리를 블렌더(Blender) 에 통합하기 위한 새로운 블루프린트도 발표했습니다. 이 블루프린트는 깃허브에서 제공되며, 개발자와 테크니컬 아티스트가 옴니버스 라이브러리 스택을 이용해 블렌더 내에서 직접 시뮬레이션 준비가 완료된 3D 콘텐츠를 제작할 수 있는 참조 워크플로우를 제공합니다 .

NVIDIA 경영진 코멘트

• 젠슨 황(Jensen Huang), NVIDIA 창립자 겸 CEO: "물리적 AI 시대는 시뮬레이션에서 먼저 구축될 것입니다. NVIDIA 에이전트 툴킷과 옴니버스 라이브러리는 AI 에이전트를 개발자가 이미 사용하고 있는 3D 도구에 직접 투입하여, 로봇, 공장, 자율주행 시스템이 실제 세계에 도달하기 훨씬 전에 훈련되고 테스트되는 시뮬레이션 준비 세계를 구축하는 데 도움을 줍니다."
• 앞서 GTC 타이베이(2026년 6월)에서 황 CEO는 이렇게 말했습니다: "AI 에이전트가 소프트웨어 개발에 혁명을 일으키고 있으며, 이제 이러한 변화가 물리적 AI로 확장되어 운송, 제조, 헬스케어, 로보틱스를 변화시킬 시스템에 접목되고 있습니다."

얼리 어답터

SideFX

사이드FX는 오픈USD 워크플로우, ovrtx, ovphysx를 활용하여 AI 에이전트가 후디니(Houdini) 절차적 3D 콘텐츠 제작 워크플로우에 옴니버스 라이브러리를 통합할 수 있는 방안을 탐색하고 있습니다. 이는 테크니컬 아티스트가 후디니 내에서 전적으로 콘텐츠를 생성하고, 물리엔진을 테스트하며, 시뮬레이션을 준비할 수 있는 경로를 제공합니다.

• 킴 데이비슨(Kim Davidson), 사이드FX 사장 겸 CEO: "절차적 3D 제작은 시뮬레이션, 로보틱스, 산업용 AI에 필요한 복잡하고 제어 가능한 세계를 구축하는 데 필수적입니다. NVIDIA 옴니버스 라이브러리와 오픈USD를 통해, 사이드FX는 에이전트 지원 도구가 후디니 워크플로우를 어떻게 지원할 수 있는지 탐색하고 있으며, 테크니컬 아티스트가 창작 과정을 통제하는 상태에서 절차적 콘텐츠를 검토, 테스트, 준비할 수 있도록 돕고 있습니다."

PTC

PTC의 온셰이프(Onshape) CAD 및 제품 데이터 관리(PDM) 플랫폼은 오픈USD와 ovrtx를 활용하여 클라우드 네이티브 설계 워크플로우를 NVIDIA RTX 센서 시뮬레이션과 연결, 브라우저에서 직접 '렌더 스튜디오' 기능을 구현하고 있습니다 .

스타트업

여러 스타트업이 옴니버스 라이브러리를 최초로 도입했습니다: ForgeCAD, Lightwheel, Moonlake AI, Palatial이 새로운 에이전트 지원 라이브러리와 기술을 활용하여 시뮬레이션 준비 에셋 파이프라인과 물리 AI 검증을 가속화하고 있습니다 .

광범위한 전략적 맥락

이번 발표는 NVIDIA가 물리 AI 시뮬레이션을 더욱 접근하기 쉽게 만들기 위한 전략의 일환입니다:

• 핵심 옴니버스 기능(RTX 렌더링, PhysX 시뮬레이션, 데이터 파이프라인)을 독립형, 헤드리스 우선 C API와 C++ 및 Python 바인딩으로 제공 — 더 이상 전체 옴니버스 플랫폼이 필요하지 않음 .
• 이러한 라이브러리를 에이전트 툴킷 내에서 에이전트가 호출 가능한 도구로 만들어, 코딩 에이전트가 장면을 자율적으로 검사하고, 문제를 식별하며, 에셋을 준비하고, 시뮬레이션을 실행할 수 있게 함 .
• 2026년 6월 GTC 타이베이에서 방대한 물리 AI 에이전트 기술(skills) 모음(옴니버스, Cosmos, Isaac, Metropolis, Alpamayo, Jetson 포괄)을 오픈소스로 공개한 데 이어, 이번 SIGGRAPH 2026에서 옴니버스 라이브러리 릴리즈로 확장함 .

궁극적인 목표는 로봇, 자율주행차, 공장, 산업용 디지털 트윈을 실제 세계에 배포하기 전에 훈련하고 테스트하는 데 필요한 시뮬레이션 준비 세계를 구축하는 개발자의 진입 장벽을 낮추는 것입니다 .