소리로 만드는 3D 세계 — EchoForge, SIGGRAPH 2026 학생 연구 대회 1위

소리만으로 Unity 3D 세계를 자동 생성하는 EchoForge가 SIGGRAPH 2026 학생 연구 대회에서 1위를 차지했어요.

EchoForge는 프랑스 파리 ESGI 석사생 아나마리아 불리가와 카밀 테바니가 개발한 공간 음향 기반 3D 환경 자동 생성 시스템이에요. 텍스트 프롬프트나 이미지 없이 오직 공간 음향 녹음만을 입력으로 받아, 그 안에 담긴 소리 정보를 분석해 Unity 3D 환경을 자동으로 만들어줘요. SIGGRAPH 2026 포스터 세션에서 발표된 이 프로젝트는 ACM 학생 연구 대회 학부 부문에서 1위를 차지하며 주목받았어요.

동작 방식은 크게 세 단계예요. 먼저 공간 음향 녹음에서 소리 이벤트의 방향과 활성 구간, 신뢰도를 추정하고 YAMNet 모델로 새·오리·벌레·바람·물소리 등의 카테고리를 인식해요. 이 공간적·의미적 정보를 통합해 'Audio Scene Graph'를 구성한 뒤, Unity용 레이아웃 명령으로 변환해 지형, 식생 군집, 수역, 환경 앰비언스 등을 절차적으로 배치해요. 모든 시각적 결정이 어떤 음향 증거에서 비롯됐는지 추적할 수 있어 해석 가능성이 높다는 점이 강점이에요.

게임 레벨 디자인이나 XR 콘텐츠 제작에서 오디오 에셋을 3D 레이아웃의 출발점으로 활용하는 새로운 워크플로우 가능성을 보여줘요. 사운드 디자인과 3D 아트 파이프라인의 경계를 허무는 시도로, 몰입형 콘텐츠 제작 방식에 새로운 방향을 제시하고 있어요.

원문: 80 Level