텍스트는 GPT가 정복했고, 이미지는 Midjourney가 바꿨어요. 다음 AI 전쟁터는 세계(World)입니다.
2026년 상반기 6개월 동안 AI 월드 모델 스타트업들에게 30억 달러($3B) 이상이 쏟아졌어요. Fei-Fei Li, Yann LeCun, Amazon, NVIDIA가 동시에 같은 카테고리에 베팅하고 있다면, 분명 뭔가 달라진 거죠.
월드 모델이 뭔데, LLM이랑 뭐가 달라요?
LLM은 텍스트를 예측해요. 이미지 AI는 픽셀을 생성하고요. 월드 모델은 달라요 — "내가 이 행동을 하면 세계가 어떻게 변할까?"를 예측합니다.
쉽게 말하면 이래요. ChatGPT한테 "공을 던지면 어떻게 되냐?" 물으면 텍스트로 답해요. 월드 모델은 그 장면을 물리 법칙대로 실시간으로 시뮬레이션해요. 중력이 작동하고, 공이 튀어오르고, 구석의 컵이 넘어지는 장면까지요.
| LLM (텍스트 AI) | 월드 모델 | |
|---|---|---|
| 예측 대상 | 다음 토큰(텍스트) | 다음 세계 상태 |
| 출력 | 문자열 | 인터랙티브 환경 |
| 물리 법칙 | 이해 없음 | 물리 법칙 시뮬레이션 |
| 주요 용도 | 글쓰기, 코딩, 대화 | 게임, 로보틱스, 자율주행 |
기술적으로는 Yann LeCun이 JEPA(Joint Embedding Predictive Architecture)라고 부르는 방식이에요. 예측을 픽셀 공간이 아닌 잠재 공간(latent space)에서 해서, 나뭇잎 흔들림 같은 예측 불가능한 것들은 과감히 버리고 중요한 물리적 원리만 포착해요. 덕분에 훈련 효율이 1.5~6배 올라가고 할루시네이션도 구조적으로 줄어들어요.
왜 6개월 만에 $3B이 몰렸을까요?
두 가지가 맞물렸어요. 첫째, 프론티어 LLM이 빠르게 상품화되면서 텍스트 AI의 마진이 압박받고 있어요. 둘째, 로보틱스와 자율주행이 실전에 진입하면서 "실제 세계를 시뮬레이션할 수 있는 AI"의 수요가 폭발했고요.
2026년 상반기 주요 투자 현황이에요:
GV의 Luna Schmid는 Odyssey에 투자하며 이렇게 말했어요: "자율주행을 가르친 것과 똑같은 AI로 전체 세계를 시뮬레이션할 수 있다는 걸 Oliver와 Jeff가 남들보다 먼저 봤다". Vinod Khosla도 "이 카테고리에서 수백억 달러짜리 기업이 여러 개 나올 것"이라고 했어요.
월드 모델의 진짜 해자: 1인칭 데이터
Odyssey는 구글 어스처럼, 360도 카메라를 등에 멘 사람들을 세계 각지에 보내 1인칭 데이터를 수집하고 있어요. "행동과 결과의 매핑"이 담긴 이 데이터는 유튜브 영상으로는 절대 학습할 수 없어요. 일찍 선점할수록 해자가 높아지는 구조예요.
지금 실전에서 어떻게 써요?
자율주행 알고리즘의 80% 이상이 이미 월드 모델 기반이에요. 게임·로보틱스·일반 개발자 순으로 지금 시작할 수 있는 접근법을 정리했어요.
- 지금 당장: NVIDIA Cosmos (무료 오픈웨이트)
무료로 시작하려면 NVIDIA Cosmos가 가장 빨라요. 오픈웨이트 월드 모델로, Hugging Face에서 다운로드해서 로보틱스·자율주행 파이프라인에 바로 연결할 수 있어요. - 게임 개발자: Google DeepMind Genie 3 탐색
텍스트·이미지에서 실시간 3D 인터랙티브 환경을 24fps로 생성해요. 게임 세계 자동 생성 프로토타입을 만들어보고 싶다면 가장 빠른 진입점이에요. - 로보틱스 팀: 시뮬레이션→실전 파이프라인 구축
월드 모델로 훈련 환경을 만들고, 실제 로봇에 학습된 정책(policy)을 전이해요. sim-to-real 성능 검증이 핵심. NVIDIA Isaac Lab + Cosmos 조합이 현재 가장 검증된 스택이에요. - 3D 프로토타이핑: World Labs Marble
Fei-Fei Li의 World Labs가 제공하는 웹 기반 플랫폼. 텍스트·이미지·동영상에서 3D 환경을 생성해요. 별도 인프라 없이 바로 3D 세계를 만들어볼 수 있어요. 건축·제품 디자인·UX 프로토타이핑에 지금 쓸 수 있어요. - Odyssey API 대기 등록
odyssey.ml에서 API 액세스 대기자 명단에 등록해요. AWS Trainium 인프라를 활용하는 팀이 우선 대상이에요. 게임·로보틱스·과학 연구 팀에게 순차적으로 열리고 있어요.
지금의 현실: 5분의 벽
현재 최고 성능의 월드 모델도 5분 이상 공간 일관성을 유지하기 어려워요. Odyssey는 30fps로 스트리밍하지만 비용은 $1~2/사용자 시간이에요. 프로덕션 게임 대체나 실제 로봇 배포에 바로 쓰기보다, 데이터 생성·시나리오 테스트·프로토타이핑부터 시작하는 게 현실적이에요.





