페이페이 리: AI용 월드 모델 구축 경쟁 (45분 팟캐스트)

World Labs 공동 창업자 Fei-Fei Li, Justin Johnson, Ben Mildenhall이 a16z의 Martin Casado와 함께 최신 **세계 모델(World Model)**인 Atlas를 공개하고, 이를 통해 추구하는 **공간 지능(Spatial Intelligence)**의 방향성을 논의했다.

Atlas의 핵심: 뉴 뷰 예측

Atlas의 중심에는 뉴 뷰 예측(New View Prediction) 기술이 있다. 이 모델은 특정 장면의 이미지나 뷰를 입력받아, 공간과 시간상 다른 위치에서 해당 환경이 어떻게 보일지 예측한다. 이를 통해 생성(Generation)과 3D 재구성(Reconstruction)을 단일 모델 내에서 통합하며, 뷰 예측이 물리적 세계를 이해하는 유용한 기본 원시(primitive)가 될 수 있는지를 탐구한다.

기술적 한계와 향후 과제

팀들은 모델의 기술적 베팅과 현재 포착할 수 있는 범위, 그리고 한계를 논의했다. 세계 모델의 발전 과정에서 동역학(Dynamics), 편집 가능성(Editability), **시뮬레이션(Simulation)**이 얼마나 중요한지 강조하며, 이러한 요소들이 모델의 실용성을 결정짓는 핵심임을 밝혔다.

응용 분야와 데이터 제약

토의에서는 창작 작업, 건축, 로보틱스 등에서의 응용 가능성이 다루어졌다. Fei-Fei Li는 현재 로보틱스 및 관련 분야 발전의 가장 큰 제약 중 하나로 **실제 세계 훈련 데이터(Real-world Training Data)**의 접근성 부족을 지목했다.