답변게시됨2개월 전Last edited 2개월 전15 소스

Hyper3D WorldGen, 한 장의 이미지에서 ‘편집 가능한 3D 공간’으로

Hyper3D WorldGen은 RGB 장면 이미지 한 장을 하나로 합쳐진 메시가 아니라, 각각 편집할 수 있는 독립 3D 오브젝트로 구성된 환경으로 변환하는 것을 목표로 한다. 게임·영상·XR·공간 컴퓨팅·로보틱스 및 체화형 AI 시뮬레이션에서, 생성 뒤에도 배치와 자산을 계속 손볼 수 있는 제작 출발점으로 제시된다.

게시자GPT-5.6 Terra로 편집GPT Image 2로 이미지 생성

Studio Global AI로 검색 및 팩트체크 인기 페이지 더 보기

연구 답변

주요 시사점

Hyper3D WorldGen은 RGB 장면 이미지 한 장을 하나로 합쳐진 메시가 아니라, 각각 편집할 수 있는 독립 3D 오브젝트로 구성된 환경으로 변환하는 것을 목표로 한다.
게임·영상·XR·공간 컴퓨팅·로보틱스 및 체화형 AI 시뮬레이션에서, 생성 뒤에도 배치와 자산을 계속 손볼 수 있는 제작 출발점으로 제시된다.
출시 시점은 보도마다 9월 1일·8일로 다르고, Hyper3D의 영문 보도자료 날짜는 2026년 9월 9일이다.

Illustration of an AI-generated editable 3D room scene assembled from separate objects — What is Deemos Hyper3D WorldGen, launched on September 8, 2026, and how does it use the Hyper3D team’s SIGGRAPH 2025 Best Paper-winning CASTHyper3D WorldGen is designed to turn a single scene image into separately editable 3D assets arranged in a shared environment.
AI 프롬프트
Create a landscape editorial hero image for this Studio Global article: What is Deemos Hyper3D WorldGen, launched on September 8, 2026, and how does it use the Hyper3D team’s SIGGRAPH 2025 Best Paper-winning CAST. Article summary: Hyper3D WorldGen is Deemos/Hyper3D’s scene-generation system: it turns one RGB scene image into a composed 3D environment of separately editable objects, rather than a single baked scene shell. Its technical basis is CAS. Topic tags: general, general web, user generated. Style: premium digital editorial illustration, source-backed research mood, clean composition, high detail, modern web publication hero. Use reference image context only for broad subject, composition, and topical grounding; do not copy the exact image. Avoid: logos, brand marks, copyrighted characters, real person likenesses, fake screenshots, UI text, readable text, watermarks, charts with fa
openai.com

핵심은 ‘3D로 보이게 하기’보다 ‘나중에 고칠 수 있게 하기’

Deemos/Hyper3D의 WorldGen은 장면 이미지 한 장을 입력받아, 편집과 상호작용이 가능한 여러 개의 3D 자산으로 이뤄진 환경을 만드는 모델이다. 의자 하나를 생성하는 데 그치지 않고, 의자·테이블·벽·소품 등을 분리된 구성 요소로 배치하는 것이 목표다. 기반 기술은 **CAST(Component-Aligned 3D Scene Reconstruction from an RGB Image)**이며, 이 연구는 SIGGRAPH 2025 베스트 페이퍼를 받았다. 2 11

핵심 약속은 사진 속 현실을 완벽하게 복원한다는 데 있지 않다. 이후 제작 단계에서 수정할 수 있는 3D 씬의 초안을 제공한다는 데 있다. Hyper3D는 게임, 영화·TV, XR(확장현실), 공간 컴퓨팅, 체화형 AI 및 로보틱스 시뮬레이션을 주요 활용 분야로 제시한다. 2

한 장의 RGB 이미지에서 공간 관계를 추론하는 방식

사용자는 WorldGen이 이미지의 주요 물체를 자동 인식하게 하거나, 원하는 영역을 박스로 직접 지정할 수 있다. 시스템은 선택된 대상에 대응하는 3D 자산을 만들고 공통 장면 안에 배치한다. 1 4

CAST가 맡는 어려운 부분은 단일 시점에서 일관된 공간 구조를 구성하는 일이다. 공개 설명에 따르면 이 기술은 가려진 부분의 형상을 보완하고, 물체 사이의 접촉·지지·매달림 같은 관계를 추론해 하나의 3D 좌표계에 배치한다. 즉, 물체를 서로 무관한 모델 묶음으로 다루기보다 물리적 역할과 상호작용을 가진 장면의 일부로 다룬다. 4 11

예를 들어 실내 사진에서 의자와 테이블, 벽, 소품은 단순한 픽셀 덩어리가 아니다. 서로 어느 위치에 있고 무엇이 무엇을 받치며 어떤 물체가 앞을 가리는지가 중요하다. 이 관계가 유지돼야 씬을 편집할 때도 설득력 있는 결과를 만들기 쉽다.

하나의 통합 메시 대신 독립 자산으로 만든다

WorldGen이 내세우는 차별점은 결과물이 하나로 융합된 씬 메시가 아니라 독립 자산의 집합이라는 점이다. 따라서 가구나 소품을 선택해 이동·교체·애니메이션 적용·상호작용 설정을 하는 작업을, 원칙적으로는 장면 전체를 다시 만들지 않고 수행할 수 있다. 2 4

Hyper3D는 이 오브젝트를 Rodin 메시 자산으로 제시한다. 제작자와 개발자는 이를 완성본으로 고정하기보다, 기존 제작 도구에서 재질·애니메이션·레벨 디자인·성능을 다듬기 위한 초기 레이아웃으로 사용할 수 있다는 의미다. 2

전경은 메시, 배경은 3D 가우시안 스플래팅

보도자료에 따르면 WorldGen은 조작하거나 상호작용할 전경 오브젝트에는 편집 가능한 메시를, 배경 환경에는 3D 가우시안 스플래팅을 활용한다. 2

역할 분담은 비교적 명확하다. 메시 형식은 선택, 이동, 애니메이션, 시뮬레이션 처리가 필요한 물체에 적합하다. 반면 스플래팅 기반 배경은 모든 요소를 자산 단위로 편집할 수 있다고 주장하기보다는, 장면의 시각적 밀도와 몰입감을 유지하는 데 유리하다.

‘SimReady’는 측정값이 아니라 시뮬레이션의 출발점

Hyper3D는 WorldGen이 스케일, 질량, 마찰, 충돌 관련 속성 등 시뮬레이션을 위한 물리 속성을 추정한다고 설명한다. 이는 실제 사진에서 출발해 로보틱스나 체화형 AI 실험용 환경을 빠르게 구성하는 데 도움이 될 수 있다. 2

다만 단일 RGB 이미지로 추정한 값은 정밀 계측값이 아니다. 사진 한 장만으로 실제 크기, 재질 계수, 내부 구조, 질량을 유일하게 알아낼 수는 없다. 물리적 정확성이 중요한 시뮬레이션에서는 이 수치를 검증과 보정이 필요한 초기값으로 보는 것이 타당하다.

Blender·Unity·Unreal로 이어지는 제작 흐름

Hyper3D는 생성 자산을 Blender, Unity, PlayCanvas, Unreal Engine, Tuanjie Engine으로 가져가 후속 작업을 할 수 있다고 밝혔다. 활용 예로는 재질 편집, 애니메이션 바인딩, 레벨 디자인, 최적화가 제시됐다. 2

영화·TV 제작에서는 우선 3D 씬으로 카메라와 물체, 공간 배치의 관계를 안정적으로 잡은 뒤, 렌더나 카메라 참조를 영상 생성 도구에 전달하는 흐름을 제안한다. 이때 영상 단계에서는 연기, 재질, 조명, 스타일을 더하되 공간적 골격은 유지한다는 구상이다. 2

게임과 XR에서는 첫 결과물의 시각적 완성도보다도 자산을 재배열하고 최적화하며 상호작용에 연결할 수 있는지가 더 중요할 수 있다. WorldGen의 실제 가치는 결국 이 후속 편집 과정에서 판가름 날 가능성이 크다.

‘월드 생성’이 곧 범용 월드 모델은 아니다

이름과 달리 WorldGen을 의사결정형 범용 월드 모델로 혼동해서는 안 된다. 현재 문서화된 기능은 자산, 기하 구조, 물리적·공간적 관계를 갖춘 씬 수준의 재구성과 생성이다. 2 4

이는 인과관계를 안정적으로 이해하고, 장기 변화를 예측하며, 열린 환경에서 에이전트의 행동을 계획하는 시스템과는 다른 범주다. WorldGen의 초점은 일반 추론이 아니라 제작 가능한 장면 구조다.

확인해야 할 한계와 평가 기준

공개된 설명은 주로 강체 오브젝트 중심의 씬 생성을 뒷받침한다. 관절형 캐릭터나 오브젝트, 천·고무 같은 변형 재질, 유체 시뮬레이션까지 폭넓게 지원한다는 근거는 아직 충분하지 않다. CAST 관련 설명도 직물, 유리, 조명, 배경 모델링을 계속 해결해야 할 난제로 든다. 11

몇 초 만의 미리보기와 수분 내 완성 씬, 중요도 기반의 정밀도 배분 방식도 언급된다. 먼저 전체 배치를 빠르게 잡고 핵심 자산을 더 정교하게 만드는 접근이다. 그러나 이는 회사와 매체의 설명이지 독립적인 실무 벤치마크는 아니다. 5

도입을 검토하는 팀이라면 대표 장면을 실제 DCC 도구나 게임 엔진으로 가져와 확인하는 편이 현실적이다. 자산 분리가 얼마나 잘 되는지, 공간 관계가 얼마나 일관적인지, 목표 워크플로에 맞추기 위해 수작업 정리가 얼마나 필요한지를 측정해야 한다.

왜 주목할 만한가

WorldGen은 생성형 3D가 단일 모델이나 수정하기 어려운 시각적 재구성 결과에서 벗어나, 기존 디지털 콘텐츠 제작 및 시뮬레이션 파이프라인으로 들어갈 수 있는 씬을 만들려는 흐름을 보여준다. 한 장의 사진이 숨겨진 모든 세부를 확실하게 알려준다는 주장이 아니다. 대신 AI가 그 사진을 자산·관계·근사 물리 속성으로 구성된 편집 가능한 씬 그래프로 바꾸고, 제작자가 그 결과를 계속 개선하도록 하겠다는 접근이다. 2 4

Studio Global AI

연구를 계속하세요

이 페이지에는 Studio Global 내에서 계속할 수 있는 소스 기반 답변이 포함되어 있습니다.

Studio Global AI로 검색 및 팩트체크

사람들은 또한 묻습니다.