From Pixels to States: Rethinking Interactive World Models as Game Engines

인터랙티브 게임 세계 모델을 게임 엔진의 action-state-observation 루프로 분석하고 90시간+ 블랙 미신 데이터를 공개한 연구.

본 논문은 인터랙티브 게임 세계 모델링을 기존 게임 엔진의 action-state-observation 루프 관점에서 체계적으로 분석했다. 플레이어 액션 제어, 게임 상태 역학, 상태-관측 지속성, 실시간 인터랙티브 생성의 4차원으로 분해하여 각 차원별 기존 방법론들을 분류하고 장단점을 논의했다. 또한 Black Myth: Wukong에서 90시간 이상의 게임플레이 데이터를 프레임 단위 액션, 엔진 익스포트 게임 상태, 시각 관측과 함께 수집한 확장 가능한 데이터 엔진을 공개했다.

핵심 요약

• 인터랙티브 세계 모델을 기존 게임 엔진의 행동·상태·관측 반복 구조로 바라보고 관련 연구를 네 차원으로 분류했다.
• 네 차원은 플레이어 행동 제어, 게임 상태 변화, 상태와 관측의 장기 지속성, 실시간 생성이다.
• Black Myth: Wukong에서 90시간이 넘는 플레이를 프레임별 행동, 실제 게임 상태, 시각 관측과 함께 모으는 데이터 엔진을 제시했다.
• 이 틀과 데이터는 화면 예측을 넘어 명시적 상태를 추적하는 차세대 생성형 게임 엔진 연구의 기준 자료로 쓸 수 있다.
• 논문은 방법 분류와 데이터 수집에 초점을 두며 규칙 준수, 장기 결과 유지, 실시간 생성을 모두 만족하는 완성된 세계 모델을 제시하지는 않는다.

논문 링크

외부 연구를 정리한 자료입니다. HDATF가 발표한 논문이나 제품 성능을 측정한 결과는 아닙니다.