The Next Medium: Why Real-Time Interactive Video Changes Everything — Ahmed Ahres, Reactor

한 줄 핵심

실시간 상호작용 영상(world models)은 영상의 소비·제작 방식을 소프트웨어처럼 바꾸며, 제어·광고·게임·로보틱스·교육까지 새로운 활용을 열지만 인프라와 평가 문제는 아직 초창기다.

시간별 요약

1. 0:00
   실시간 상호작용 영상으로 정의하는 world models world models는 단순한 생성 영상이 아니라 실시간으로 반응하고 바뀌는 상호작용 영상으로 정의되며, 이것이 콘텐츠 생산과 소비를 근본적으로 바꿀 수 있다는 주장이 중심이다. 기존 영상은 결과물을 받은 뒤엔 바꿀 수 없는 수동적 매체지만, 실시간 픽셀 생성이 가능해지면 영상은 소프트웨어처럼 다룰 수 있는 매체가 된다.
2. 1:44
   영상이 프로그래밍 가능해질 때 생기는 변화 생성된 영상이 파일이 아니라 실시간으로 조작 가능한 매체가 되면, 단순히 속도가 빨라지는 수준이 아니라 매체의 성격 자체가 달라진다. 현재의 접근이 주는 제약을 넘어, 실시간성이 과거에 어떤 새로운 응용을 열었는지 역사적 사례를 통해 설명하며 Reactor는 이 실시간 world model을 위한 개발 플랫폼과 인프라를 만든다.
3. 3:25
   지도에서 GPS로, 필름에서 뷰파인더로 지도에서 GPS로의 변화는 정적인 정보가 실시간 위치 정보로 바뀌면서 Uber 같은 서비스가 가능해졌다는 점을 보여준다. 필름에서 디지털 카메라 뷰파인더로의 변화는 촬영 중 결과를 즉시 확인하고 수정할 수 있게 하면서 Instagram과 TikTok 같은 고품질 콘텐츠 생태계를 열었다.
4. 5:04
   무한하고 상호작용 가능한 실시간 모델 첫 번째 모델 유형은 Vio나 Sora처럼 보이지만 실시간으로 계속 이어지고, 사용자의 입력에 따라 화면이 즉시 바뀌는 무한한 생성 모델이다. 이미지 하나를 넣고도 개, 고양이, 드래곤 같은 요소가 실시간으로 추가되며, 기존 배치형 생성 모델로는 불가능한 서사적 제어가 가능하다.
5. 5:52
   제어, 광고, 그리고 즉각적 피드백 실시간 영상의 핵심 가치는 콘텐츠 제작자가 원하는 수준의 제어를 제공하고, 즉각적 피드백을 통해 슬롯머신 같은 불확실성을 없애는 데 있다. 또한 사용자의 방금 전 행동을 바탕으로 광고를 실시간으로 삽입하는 방식이 가능해져, 사전 제작 광고의 필요 자체를 줄일 수 있다.
6. 7:32
   제어 가능한 세계, 로보틱스, 교육 두 번째 모델 유형은 Genie 3처럼 이미지와 텍스트로 캐릭터나 세계를 제어할 수 있는 모델이며, 게임과 영화의 경계를 넘는 상호작용 경험을 만든다. 특히 로보틱스에서는 무한한 시뮬레이션 데이터 생성이 가능하고, 교육에서는 역사 수업처럼 아이를 직접 상황 속에 넣는 새로운 체험형 학습이 가능하다.
7. 9:13
   아직 완전히 해결되지 않은 라이브 아바타 세 번째 모델 유형은 실시간으로 대화하고 반응하는 아바타지만, 현재는 아직 자연스럽고 안정적으로 동작하지 못한다. 그럼에도 고객지원, 훈련, 판매, 게임, 스트리밍 같은 영역에서 다른 모델들과 결합되며 큰 변화를 만들 가능성이 크다.
8. 10:06
   실제로 사람들이 만들고 있는 것들 사용자들은 실시간 라이브 스트림에서 시청자가 다음 전개를 투표하는 인터랙티브 방송, 의료 시뮬레이션, 요리 시뮬레이션, 그리고 실시간 효과를 추가하는 비디오 편집 플랫폼을 만들고 있다. 하위 제품군으로는 Helios, Link bot, Long live 2, sound streaming 같은 모델이 소개되며, 생성·시뮬레이션·편집이 하나의 API 세계로 묶인다.
9. 12:37
   실시간 인프라는 배치 인프라와 다르다 실시간 영상 인프라는 요청을 보내고 파일을 받는 배치 생성과 달리 스트리밍, 세션 유지, 메모리 관리, 전역 저지연 라우팅을 모두 고려해야 한다. 특히 100ms 이하 지연과 지역별 GPU 배치가 중요하며, Reactor는 API 키만으로 쉽게 통합할 수 있다고 강조한다.
10. 16:10
    평가는 아직 풀리지 않은 문제 실시간 world model의 품질 평가는 픽셀 수준의 선명도보다 일관성, 기억, 사실성 같은 기준이 더 어렵지만 아직 정답이 없다. 현재는 사람이 직접 보고 판단하는 수준에 머물러 있으며, 업계와 연구 커뮤니티 전체가 이 문제를 아직 해결하지 못했다.

실무 인사이트

• 실시간 생성이 핵심이라면 모델 성능만큼이나 스트리밍, 메모리, 전역 배포 같은 인프라 설계가 제품 경쟁력을 좌우한다.
• 이 분야의 초기 제품은 완성형 아바타보다 인터랙티브 라이브 스트림, 시뮬레이션, 편집 보조처럼 즉시 효용이 보이는 좁은 문제부터 공략하는 편이 유리하다.
• 평가 체계가 미성숙하므로, 정량 지표가 부족한 상황에서는 인간 검수와 시나리오 기반 테스트를 함께 설계해야 한다.