General Intuition이 비디오 게임을 활용해 현실 세계의 AI를 구축하는 방법

General Intuition은 방대한 비디오 게임 데이터셋을 사용하여 물리적 세계를 위한 에이전트 모델(agentic models)을 학습시킴으로써 로보틱스 분야에서 거대한 패러다임 전환을 시도하고 있습니다. 최근 3억 2천만 달러 규모의 투자 유치에 성공한 이 스타트업은 게임에서 발견되는 '액션 데이터(action data)'가 인공지능의 결정적 연결 고리(missing link)라고 확신하고 있습니다.

액션 레이블과 시공간적 추론의 힘

많은 AI 연구자들이 단순히 영상물을 관찰하는 방식으로 모델을 학습시키려 하지만, General Intuition의 CEO Pim de Witte는 영상만으로는 불충분하다고 주장합니다. 이 회사의 경쟁 우위는 사용자들이 비디오 게임 클립을 공유하는 플랫폼인 Medal의 독점 데이터에 접근할 수 있다는 점에 있습니다.

일반적인 영상과 달리, 이 클립들에는 플레이어가 어떤 버튼을 정확히 언제 눌렀는지에 대한 정밀한 기록인 '액션 레이블(action labels)'이 포함되어 있습니다. 이를 통해 모델은 단순한 패턴 인식을 넘어 시공간적 추론(spatial-temporal reasoning)을 학습할 수 있습니다. 특정 입력(액션)과 그로 인해 발생하는 환경의 변화(반응) 사이의 직접적인 연결 고리를 이해함으로써, AI는 인과관계(causality)를 파악하기 시작합니다. 이는 모델이 '자아'와 '환경'을 구분할 수 있게 해주며, 이는 모든 자율 에이전트에게 필수적인 요구 사항입니다.

Fortnite에서 사족 보행 로봇까지

이 회사의 기술적 야망은 게임 플레이, 시뮬레이션, 물리적 구현(physical embodiment) 등 서로 다른 영역을 아우르는 단일 모델을 만드는 것입니다. 최근 시연에서 게임 플레이를 통해 학습된 AI 에이전트는 벽이 단단한 물체이며 그림자가 태양의 움직임에 따라 변한다는 것을 이해하며 복잡한 가상 환경을 탐색할 수 있었습니다.

결정적으로, 이 '두뇌'는 하드웨어로 직접 이식되고 있습니다. 회사는 게임 에이전트를 구동하는 것과 동일한 모델을 사용하는 사족 보행 로봇을 선보였습니다. 특히, 실제 거리에서 수집된 단 8분 분량의 현실 세계 로보틱스 데이터만으로도 로봇의 내비게이션을 위한 모델 미세 조정(fine-tuning)이 가능했다고 팀은 보고했습니다. 이는 물리 법칙과 공간 인지력을 학습하는 고된 작업이 비디오 게임이라는 '체육관(gym)'에서 이루어지고 있음을 시사하며, 결과적으로 현실 세계로의 배포를 훨씬 더 효율적으로 만듭니다.

범용 에이전트에 거는 23억 달러의 승부수

이러한 야망의 규모는 회사의 기업 가치에 반영되어 있습니다. General Intuition은 최근 23억 달러의 기업 가치로 3억 2천만 달러를 조달했으며, 이로써 총 공개된 투자 유치 금액은 4억 5,400만 달러에 달합니다. 이번 투자 라운드는 Khosla Ventures가 주도했으며, General Catalyst, Jeff Bezos, Eric Schmidt, 그리고 Google DeepMind와 MIT의 연구원들이 대거 참여했습니다.

확보된 자금은 두 가지 주요 목표를 위해 사용될 예정입니다. 바로 CoreWeave와의 파트너십을 통한 컴퓨팅 용량 확장과 여름 말까지 API를 더 널리 사용할 수 있도록 만드는 것입니다. Vinod Khosla와 같은 투자자들에게 목표는 단순한 자동화의 개선이 아니라, 프로그래밍된 명령을 따르는 것을 넘어 이해를 통해 세상을 탐색하는 인간과 유사한 능력인 'AI 직관(AI intuition)'의 출현입니다.

핵심 요약

  • 액션 중심 학습: General Intuition은 게임 클립의 버튼 입력 '액션 레이블'을 사용하여 AI에게 인과관계를 가르침으로써, 영상만으로 학습할 때의 한계를 극복합니다.
  • 확장 가능한 시뮬레이션: 비디오 게임을 '체육관(gym)'으로 활용함으로써, 막대한 비용이 드는 현실 세계의 로보틱스 데이터를 수집하지 않고도 복잡한 시공간적 추론을 학습시킬 수 있습니다.
  • 막대한 기관의 지원: 23억 달러의 기업 가치와 Jeff Bezos, Eric Schmidt와 같은 인물들의 지원을 바탕으로, 이 회사는 월드 모델(world model) 시대의 핵심적인 플레이어로 자리매김하고 있습니다.