The Next Game Engine Won't Have a Manual — Arturo Nunez, Nereu

한 줄 핵심

이 영상은 게임 엔진의 핵심 인터페이스를 코드가 아니라 자연어 설명으로 바꾸고, 태그와 컨텍스트 조립으로 게임 제작의 진입장벽을 낮추는 새로운 방식이 가능하다고 주장한다.

시간별 요약

1. 0:00
   설명만으로 게임을 실시간으로 만들기 로봇 캐릭터를 추가하고 WASD 이동과 애니메이션을 자연어로 지시해 바로 게임 오브젝트로 만드는 시연을 통해, 앞으로의 게임 제작은 코딩보다 원하는 동작을 말로 설명하는 방식이 될 수 있음을 보여준다. 건물, 비, 카메라 추적까지 계속 설명을 덧붙이며 게임을 조립하듯 만들어 간다.
2. 2:45
   게임 만들기가 어려운 이유 전통적인 도구로는 같은 결과를 만들기 위해 코드, 에셋 임포트, 설정, 컴포넌트 조합을 모두 이해해야 하므로 진입장벽이 매우 높다. 제작자는 Unity에서 오랫동안 보아 온 반복적 고생을 바탕으로, 게임 제작의 어려움은 기술보다도 워크플로의 비효율에 있다고 본다.
3. 4:27
   Unity에서 10년 동안 반복된 고생을 보다 게임 제작에는 프로그래밍, 3D 모델링, 렌더링, 음악, 애니메이션 등 다양한 역량이 필요해 소규모 팀이나 개인이 감당하기 어렵다. 기술적으로 동작하는 것만으로는 충분하지 않고 재미까지 확보해야 하며, 제작 과정 자체도 플레이하듯 즐거워야 한다는 관점이 강조된다.
4. 6:59
   강력한 엔진과 LLM이 있어도 아직 맞물리지 않는 이유 Unreal, Unity, LLM, agent가 있어도 엔진의 언어와 코드의 언어를 여전히 알아야 해서 자연어와 게임 엔진 사이가 매끄럽게 이어지지 않는다. 현재 방식은 모델이 매번 같은 구조를 재발명하게 만들기 쉬우며, 기본 초점도 게임 디자인보다 엔진 내부에 맞춰져 있다.
5. 7:49
   캐릭터 제어 뒤에 숨어 있는 보일러플레이트 캐릭터를 움직이려면 mesh, renderer, animator, rigid body, collider, audio source 같은 요소를 모두 준비하고 연결해야 하며, 대부분은 모든 게임에 반복되는 보일러플레이트다. 이런 구성 요소 설명 대신, 화면에 그려질 수 있고 물리를 가질 수 있는 대상을 공통된 방식으로 다루는 추상화가 필요하다.
6. 8:45
   모든 것은 에셋이고 태그가 의도를 설명한다 대상을 character, animated, double jump 같은 태그로 설명하고, coin을 먹으면 score를 올리는 식의 이벤트 의도를 태그로 표현하는 접근이 제안된다. 물리와 렌더링은 여전히 내부에서 처리되지만, 사용자는 게임 언어로 의도를 말하듯 제작할 수 있어야 한다는 방향이다.
7. 9:37
   에셋 태그 시스템과 건물을 주행 가능하게 만들기 ATS(asset tag system)는 ECS와 data-oriented design에서 착안해, 오브젝트를 태그로 기술하고 시스템이 특정 태그 조합을 가진 대상만 찾아 처리하는 구조다. 건물에 vehicle과 drivable 태그를 붙이면 Mario Kart 스타일의 주행 가능한 건물도 만들 수 있으며, AI assistant는 막혔을 때 적절한 태그와 도구를 찾아 적용해 준다.
8. 11:21
   프롬프트에 들어가는 컨텍스트 만들기 프롬프트는 현재 씬의 정보에 더해 에셋 종류, 게임 장르, 사용자가 원하는 분위기 같은 추가 정보를 함께 붙여 구성된다. 스크립팅 없이도 엔진 안의 태그와 시스템을 AI가 호출하고 갱신하며, 조명·후처리처럼 장르와 분위기에 영향을 주는 요소를 함께 분해해 다룬다.
9. 14:52
   컨텍스트 조립에 적용한 수준별 디테일 6,000~7,000개의 에셋을 사람이 직접 태깅할 수 없어 vision model로 설명을 생성하고, 씬 전체를 한 번에 넣는 대신 가까운 대상에 더 많은 정보를 주는 level of detail 방식을 컨텍스트 구성에 적용한다. 사용자가 현재 편집 중인 대상 주변 정보는 더 자세히 보내고, 멀리 있거나 중요도가 낮은 요소는 간략히 처리해 컨텍스트 크기를 관리한다.
10. 16:37
    한 번에 완성하기보다 막힘을 풀어주기 이 assistant의 목표는 게임을 한 번에 완성시키는 것이 아니라, 사용자가 막힌 지점을 넘어 계속 만들 수 있게 돕는 것이다. 게임 제작 언어와 디자인 감각을 익히는 과정 자체가 중요하며, 결과물을 단숨에 뽑아내는 것보다 만드는 재미와 공유 경험이 우선된다.
11. 17:28
    World models는 다른 매체다 실시간으로 생성되는 world models는 흥미롭지만, 60fps와 4K 렌더링, 물리 시뮬레이션을 동시에 만족해야 하는 현재의 게임 요구사항과는 다른 매체로 보아야 한다. 지금의 도구는 여전히 실용적인 한계가 크지만, 게임을 다시 재미있는 창작 활동으로 바꾸는 방향성은 충분히 의미가 있다.

실무 인사이트

• 게임 제작용 AI는 코드를 직접 쓰게 하기보다, 자주 반복되는 보일러플레이트를 태그와 시스템으로 추상화할수록 실사용성이 높아진다.
• 컨텍스트 엔지니어링은 씬 전체를 넣는 문제가 아니라, 현재 편집 대상과 주변 우선순위에 따라 정보량을 조절하는 문제로 봐야 한다.
• 초기 제품 목표를 '완성'이 아니라 '막힘 해소'로 잡으면, 초보자도 계속 시도할 수 있는 제작 경험을 설계하기 쉽다.