엔비디아, SIGGRAPH 2026서 Agent Toolkit에 Omniverse 라이브러리 탑재… 물리 AI 시뮬레이션 대중화 가속

SIGGRAPH 2026에서 엔비디아는 Agent Toolkit에 엔비디아 옴니버스(NVIDIA Omniverse) 라이브러리를 통합한다고 발표했다. 이 라이브러리들은 모듈식 오픈소스 소프트웨어 구성 요소 모음으로, AI 에이전트가 기존 3D 및 산업용 애플리케이션에 물리 AI 기능(센서 시뮬레이션, 물리 엔진, 시뮬레이션 준비 완료 에셋 검증)을 직접 추가할 수 있게 해준다. 모든 라이브러리는 깃허브(GitHub)에서 공개됐으며, 함께 공개된 'SimReady Blender' 청사진도 주목할 만하다 .

깃허브에 공개된 신규 라이브러리

엔비디아는 옴니버스 스택의 일부로 여러 신규 라이브러리를 발표했다. 각 라이브러리는 기존 애플리케이션에 특정 물리 AI 기능을 제공하도록 설계됐다.

• ovrtx — RTX 센서 시뮬레이션 라이브러리(프리릴리즈, 깃허브). 경량 C 및 Python SDK를 제공하며, OpenUSD 장면에서 카메라·라이다·레이더 등 센서 출력을 생성한다. 애플리케이션과 AI 에이전트가 물리 AI 시스템이 가상 환경을 어떻게 인식하는지 테스트할 수 있게 한다 .
• ovphysx — GPU 가속 물리 시뮬레이션 라이브러리. 충돌·질량·마찰·운동 등 현실적인 물리 거동을 3D 장면에 구현해 팀이 시뮬레이션 환경에서 객체와 시스템 간 상호작용을 테스트할 수 있도록 한다 .
• ovstage — OpenUSD 장면 데이터를 위한 공유 런타임 스테이지. ovphysx와 ovrtx 같은 라이브러리가 공통 데이터 기반을 통해 시뮬레이션 상태를 교환할 수 있게 한다 .
• CAD-to-SimReady 스킬 — CAD 데이터를 OpenUSD 기반 시뮬레이션 준비 완료(SimReady) 에셋으로 변환한다. 물리 AI 시뮬레이션에 필요한 구조적·재질적·물리적 속성을 3D 콘텐츠에 부여한다 .

이외에도 ovstream(스트리밍)과 ovstorage(데이터 관리) 등 지원 라이브러리가 포함된다 .

SimReady Blender 청사진

엔비디아는 옴니버스 라이브러리를 **블렌더(Blender)**와 통합하는 새로운 청사진도 공개했다. 현재 깃허브에서 이용할 수 있으며, 개발자와 테크니컬 아티스트가 블렌더 내에서 직접 시뮬레이션 준비가 완료된 3D 콘텐츠를 제작하는 참조 워크플로를 제공한다 .

경영진 발언

제너슨 황(Jensen Huang) 엔비디아 창립자 겸 CEO: "물리 AI 시대는 시뮬레이션에서 먼저 구축될 것입니다. 엔비디아 Agent Toolkit과 옴니버스 라이브러리는 AI 에이전트를 개발자가 이미 사용하는 3D 도구로 데려와, 로봇·공장·자율 시스템이 실제 세상에 도달하기 오래전에 훈련되고 테스트되는 시뮬레이션 준비 완료 세계를 구축하는 데 도움을 줍니다."

앞서 2026년 6월 GTC 타이베이에서 황 CEO는 다음과 같이 말했다: "AI 에이전트는 소프트웨어 개발에 혁명을 일으키고 있으며, 이러한 변화는 이제 물리 AI로 확장되어 교통·제조·헬스케어·로보틱스를 변화시킬 시스템으로 이어지고 있습니다."

얼리 어답터(초기 도입사)

사이드FX(SideFX)

사이드FX는 OpenUSD 워크플로, ovrtx, ovphysx를 활용해 AI 에이전트가 옴니버스 라이브러리를 후디니(Houdini) 절차적 3D 콘텐츠 제작 워크플로에 통합하는 방안을 탐색 중이다. 이를 통해 테크니컬 아티스트는 후디니 내에서 콘텐츠를 생성하고 물리 테스트를 거쳐 시뮬레이션용으로 준비하는 전체 과정을 수행할 수 있게 된다.

킴 데이비슨(Kim Davidson) 사이드FX 사장 겸 CEO: "절차적 3D 생성은 시뮬레이션·로보틱스·산업용 AI에 필요한 복잡하고 통제 가능한 세계를 구축하는 데 필수적입니다. 엔비디아 옴니버스 라이브러리와 OpenUSD를 통해 사이드FX는 에이전트 지원 도구가 후디니 워크플로를 어떻게 지원할 수 있을지 탐색하며, 테크니컬 아티스트가 창작 과정을 통제하는 동시에 시뮬레이션용 절차적 콘텐츠를 검토·테스트·준비할 수 있도록 돕고 있습니다."

PTC

PTC의 온셰이프(Onshape) CAD 및 제품 데이터 관리(PDM) 플랫폼은 OpenUSD와 ovrtx를 사용해 클라우드 네이티브 설계 워크플로를 엔비디아 RTX 센서 시뮬레이션과 연결, 브라우저에서 바로 'Render Studio' 기능을 구현했다 .

스타트업

여러 스타트업이 옴니버스 라이브러리를 최초로 도입했다: 포지CAD(ForgeCAD), 라이트휠(Lightwheel), 문레이크 AI(Moonlake AI), 팔라셜(Palatial) 등이 새로운 에이전트 지원 라이브러리와 스킬을 활용해 시뮬레이션 준비 완료 에셋 파이프라인과 물리 AI 검증을 가속화하고 있다 .

광범위한 전략적 맥락

이번 발표는 엔비디아가 물리 AI 시뮬레이션에 대한 접근성을 높이기 위한 전략의 연장선상에 있다:

• 옴니버스 핵심 기능(RTX 렌더링, PhysX 시뮬레이션, 데이터 파이프라인)을 독립형, 헤드리스 우선 C API로 노출하고 C++ 및 Python 바인딩 제공 — 더 이상 전체 옴니버스 플랫폼이 필요하지 않다 .
• 이 라이브러리들을 Agent Toolkit 내에서 에이전트 호출 가능 도구로 만들어, 코딩 에이전트가 장면을 자율적으로 검사하고 문제를 식별하며 에셋을 준비하고 시뮬레이션을 실행할 수 있게 한다 .
• 2026년 6월 GTC 타이베이에서 물리 AI 에이전트 스킬의 대규모 오픈소스 컬렉션(옴니버스, 코스모스, 아이작, 메트로폴리스, 알파마요, 제트슨 포함)을 공개한 데 이어, SIGGRAPH 2026에서 옴니버스 라이브러리 릴리즈로 확장했다 .

궁극적인 목표는 개발자가 로봇·자율주행차·공장·산업용 디지털 트윈을 실제 세상에 배치하기 전에 훈련하고 테스트할 수 있는 시뮬레이션 준비 완료 세계를 구축하는 데 드는 장벽을 낮추는 것이다 .