실시간 인터랙티브 비디오가 미디어를 바꾸는 이유

메타데이터

• 원문 제목: The Next Medium: Why Real-Time Interactive Video Changes Everything — Ahmed Ahres, Reactor
• URL: https://www.youtube.com/watch?v=5dCAmSDOAjI
• 날짜: 2026-08-19
• 채널: aiDotEngineer
• 발표자: Ahmed Ahres, Reactor Head of Go-to-Market
• 원문 길이: 약 1,050초
• 주제: 실시간 인터랙티브 비디오(Real-Time Interactive Video), 월드 모델(World Model), 생성형 미디어 인프라

📌 핵심 질문 / 실시간 비디오가 던지는 핵심 논점

==픽셀을 소프트웨어처럼 실시간으로 생성하고 수정할 수 있다면, 비디오는 수동적으로 소비하는 녹화물이 아니라 조건·명령·사용자 입력에 반응하는 실행 가능한 매체가 된다.==

• 현재 생성형 비디오는 프롬프트를 보내 파일을 받고 시청하는 배치(batch) 방식이라 결과를 받은 뒤 바꿀 수 없다.
• 실시간성은 단순히 처리 속도를 높이는 일이 아니라 피드백·제어·상호작용을 매체의 본질에 넣는 일이다.
• 지도에서 GPS로, 필름에서 디지털 카메라로 넘어간 것처럼 실시간화는 Uber, Instagram, TikTok 같은 새로운 제품 범주를 열었다.
• 실시간 인터랙티브 비디오는 콘텐츠 제작·광고·게임·로봇공학·교육·의료 시뮬레이션·라이브 스트리밍·편집을 동시에 바꿀 수 있다.

Ahmed Ahres는 월드 모델을 Gaussian Splatting이나 단순한 비디오 생성 모델의 마케팅 용어로 한정하지 않고, 진정한 의미의 실시간 인터랙티브 비디오로 정의한다. Reactor는 아직 정지된 모델 중심으로 머물러 있는 시장에 스트리밍·세션·메모리·글로벌 저지연을 갖춘 인프라와 개발자 플랫폼을 제공하는 Series A 기업이다.

1. 수동적인 비디오를 프로그래밍 가능한 매체로 바꾸기

비디오는 제작자가 미리 녹화한 결과물을 관객이 받아들이는 수동적 매체였지만, 실시간 픽셀 생성은 결과물 자체를 실행·수정 가능한 상태로 바꾼다.

1.1. 배치 생성의 슬롯머신 문제

1. 현재 생성형 비디오의 흐름

   1. Veo 3와 C-Dance 2 같은 모델에 프롬프트를 입력한다.
   2. 모델이 파일을 돌려주면 사용자는 결과를 시청한다.
   3. 결과가 마음에 들지 않아도 파일을 받은 뒤 장면의 원인·인물·움직임을 직접 바꿀 수 없다.

2. 통제권의 부재

   1. 이 구조는 Ahmed가 말한 슬롯머신(slot machine)과 같다. 버튼을 누르고 결과를 기다릴 뿐, 결과가 나온 뒤 결과 내부에 개입할 수 없다.
   2. 영화 제작자·프로듀서·콘텐츠 제작자는 생성 품질보다도 필요한 통제권을 얻지 못하는 점을 반복해서 문제로 지적한다.
   3. 실시간 피드백이 없으면 무엇이 잘못됐는지 즉시 보고 수정할 수 없으므로 궁극적인 제어에 도달할 수 없다.

1.2. 비디오가 소프트웨어처럼 동작하는 조건

1. 프로그래밍 가능한 픽셀

   1. 비디오가 프로그래밍 가능해지면 화면에 접근하고(address), 조건을 걸고(condition), 화면에 나타나는 대상을 바꿀(change) 수 있다.
   2. 사용자는 화면에 필요한 것을 원하는 순간 보여줄 수 있으며, 비디오도 소프트웨어처럼 입력에 반응하는 매체가 된다.

2. 실시간성의 의미

   1. 실시간은 배치 작업을 더 빠르게 완료하는 기능이 아니라 매체의 본질을 바꾸는 속성이다.
   2. 픽셀을 생성하는 동안 화면을 관찰하고, 입력을 추가하고, 결과를 다시 조정하는 피드백 루프가 매체 안에 들어온다.
   3. Ahmed가 잠시 말을 멈추고 “앗, 무슨 일이에요? 죄송합니다. 좋아요”라고 정리한 뒤 목을 가다듬은 장면은 발표 흐름의 짧은 해프닝으로 남았다.

2. 실시간 기술이 새로운 제품 범주를 만든 방식

지도와 영상 제작의 역사는 실시간화가 기존 제품을 조금 빠르게 만드는 데 그치지 않고, 이전에는 존재할 수 없었던 사용 사례를 만든다는 점을 보여준다.

2.1. 지도에서 GPS로: 위치 정보가 Uber를 만들다

1. 정적 지도와 실시간 위치

   1. 1950년대 또는 그 이전에는 누군가 만든 지도를 보고 자신의 위치를 확인한 뒤 끝냈다.
   2. 정적 지도는 현재 위치를 보여주지만, 위치가 움직이는 동안 계속 갱신하거나 그 정보를 다른 서비스의 의사결정에 연결하지 못했다.

2. GPS가 연 새로운 시장

   1. GPS는 위치를 실시간으로 추적하게 만들어 사용자가 바로 지금 어디에 있는지 알 수 있게 했다.
   2. GPS를 단순히 위치 확인을 조금 빠르게 만든 기술로만 보면 핵심을 놓친다. GPS가 없었다면 Uber는 존재하지 않았을 것이다.
   3. 실시간 데이터는 기존 지도에 속도를 더한 것이 아니라, 운전자·승객·배차를 연결하는 완전히 새로운 서비스 구조를 가능하게 했다.

2.2. 필름에서 디지털 카메라로: 즉시 피드백이 고품질 콘텐츠를 만들다

1. 필름 제작의 지연

   1. 필름 시대에는 촬영자가 장면을 찍어도 무엇을 찍었는지 즉시 볼 수 없었다.
   2. 촬영물을 현상하고 제작 과정을 거친 뒤에야 관객이 결과를 볼 수 있으므로, 촬영 중 문제를 확인하고 바로 수정하기 어려웠다.

2. 디지털 촬영과 적응적 제작

   1. 디지털화 이후 촬영자는 촬영 중인 화면을 바로 볼 수 있게 됐다.
   2. 오늘날 iPhone으로 동영상을 찍으면 화면에서 일어나는 일을 확인하면서 구도와 행동을 즉시 조정할 수 있다.
   3. 이런 즉시 피드백이 고품질 콘텐츠 제작을 가능하게 한 중요한 이유이며, Instagram과 TikTok이 등장할 수 있었던 토대다.
   4. 디지털 카메라가 없었다면 고품질 콘텐츠를 대량 생산하기 어려웠고, Instagram과 TikTok 같은 서비스도 지금과 같은 형태로 존재하기 힘들었다.

3. 실시간 인터랙티브 월드 모델의 세 가지 유형

현재 시장에는 실시간 상호작용을 서로 다른 방식으로 구현하는 세 유형의 모델이 나타나고 있으며, 이 유형들은 서로 결합될 때 새로운 경험을 만든다.

3.1. 유형 1: 무한히 이어지는 실시간 인터랙티브 비디오

1. 기존 모델과의 차이

   1. Veo나 Sora와 비슷한 비디오 생성 능력을 5초·10초·30초짜리 파일이 아니라 끝없이 이어지는 스트림으로 구현한다.
   2. 화면에서 벌어지는 일을 사용자가 바꿀 수 있으며, 결과를 기다리지 않고 실시간으로 확인한다.

2. 개와 고양이 데모의 의미

   1. 개 이미지를 입력하면 개가 등장하는 비디오가 실시간으로 생성된다.
   2. 실행 중 고양이가 나타나도록 프롬프트를 보내면 기존 장면에 고양이가 실시간으로 들어온다.
   3. 배치 비디오 모델은 파일을 반환한 뒤 장면을 수정할 수 없으므로 같은 작업을 수행할 수 없다.
   4. 개와 고양이가 달리고 점프하는 이야기, 용이 나타나는 장면, 심지어 월드컵으로 이동하는 전개까지 같은 흐름 안에서 계속 추가할 수 있다.

3. 제작 통제권의 회복

   1. 즉각적인 피드백은 궁극적인 제어(ultimate control)다.
   2. 실시간 모델은 슬롯머신식 생성에서 벗어나 제작자가 장면의 조건·방향·결과를 계속 조정하게 한다.

4. 실시간 광고

   1. 사용자가 1분 전에 검색한 대상을 알 수 있다면 그 대상의 로고나 관련 장면을 즉시 화면에 삽입할 수 있다.
   2. 미리 광고를 제작·저장하지 않고 사용자 앞에서 바로 광고를 생성할 수 있다.
   3. 브랜드는 로고의 흰색 픽셀 하나가 어두운 픽셀로 잘못 생성될 가능성도 걱정하므로 도입에는 시간이 걸린다.
   4. 품질과 브랜드 안전성 문제가 해결되면 광고를 사전에 제작할 필요 자체가 줄고, 모든 광고가 시청자 앞에서 실시간으로 만들어질 수 있다.

3.2. 유형 2: 캐릭터와 세계를 직접 조종하는 월드 모델

1. Genie 3 계열의 상호작용

   1. 이미지와 텍스트를 입력하고 캐릭터를 제어하는 형태이며, Google의 Genie 3가 대표 사례다.
   2. 캐릭터와 세계를 생성할 수 있어 처음에는 게임이 가장 자연스러운 응용처럼 보인다.

2. 게임을 넘어선 인터랙티브 서사

   1. 캐릭터의 행동뿐 아니라 세계에서 일어나는 사건을 제어해 기존에 불가능했던 인터랙티브 경험을 만든다.
   2. Netflix의 Bandersnatch처럼 관객이 다음 장면을 직접 선택하는 게임·영화 혼합 형식이 실시간 모델과 연결된다.
   3. 사용자는 캐릭터와 사건을 함께 조종하고, 매번 다른 서사와 경험을 만들 수 있다.

3. 로봇공학과 무한한 훈련 데이터

   1. 시뮬레이션과 제어가 가능하면 원하는 환경에서 원하는 행동을 반복 생성해 필요한 만큼 훈련 데이터를 만들 수 있다.
   2. 로봇공학 월드 모델은 이미 거대한 시장이며, 이런 모델을 학습·개발하는 로봇 연구소가 매우 많다.
   3. 물리 환경과 조작 대상을 통제할 수 있다는 점이 로봇공학에 무한한 데이터 생성 기회를 제공한다.

4. 교육의 몰입형 전환

   1. Ahmed는 교육의 미래가 LLM이나 교과서 기반에만 머물지 않을 것이라고 본다.
   2. 학생을 역사 수업 속 특정 상황에 직접 넣고 그 안에서 선택·탐험·상호작용하게 만들면 교육적인 새로운 경험이 열린다.
   3. 지식을 읽거나 질문하는 방식에서 상황 속에 들어가 경험하는 방식으로 교육의 단위가 바뀐다.

3.3. 유형 3: 살아 움직이는 인터랙티브 아바타

1. 기존 아바타의 미해결 문제

   1. 실시간 아바타는 이전부터 보아 온 아바타를 살아 움직이고 상호작용하도록 만든 형태다.
   2. 하지만 아바타의 자연스러움은 아직 해결되지 않았고, 고객 지원 아바타와 대화할 때도 어딘가 어색하고 부자연스럽다.

2. 유형 1·2와의 결합

   1. 연구 프리뷰에서 실시간 인터랙티브 아바타가 늘고 있다.
   2. 아바타 모델을 실시간 비디오 모델과 캐릭터·세계 제어 모델에 결합하면 지금까지와 크게 다른 경험이 된다.
   3. 고객 지원, 교육·훈련, 영업(sales), 게임, 스트리밍 서비스가 주요 적용 분야가 된다.

4. Reactor 사용자들이 만드는 실제 응용

실시간 픽셀 생성은 관객·학습자·제작자가 화면의 다음 상태에 개입하는 제품을 가능하게 한다.

4.1. 참여형 라이브 스트리밍

1. 시청자가 다음 장면을 결정하는 스트림

   1. 시청자는 라이브 스트림을 보면서 다음에 무슨 일이 일어날지 텍스트로 입력한다.
   2. 여러 선택지를 투표하고, 결과에 따라 실시간으로 다음 장면이 생성된다.

2. 배포 플랫폼과의 결합

   1. X, YouTube, Twitch에 라이브 스트림을 올리고 시청자가 다음 전개를 고르게 할 수 있다.
   2. 픽셀이 실시간으로 생성되므로 제작자가 모든 경우의 수를 미리 촬영하고 편집할 필요가 없다.

4.2. 의료 시뮬레이션

1. 가상 세계를 생성한 뒤 특정 약물을 투여했을 때 어떤 변화가 생기는지 시뮬레이션한다.
2. 약물을 제거하면 어떤 결과가 발생하는지도 비교할 수 있다.
3. 이런 가상 환경은 의사가 되려는 사람이 약물과 상황의 변화를 안전하게 연습하는 훈련 놀이터가 된다.

4.3. 요리 시뮬레이션

1. 가상 주방에서 재료를 넣었을 때 어떤 일이 벌어지는지 시뮬레이션한다.
2. 특정 재료를 추가하거나 순서를 바꾸면서 결과를 즉시 확인할 수 있다.
3. 레시피를 읽는 것을 넘어 조리 과정의 인과관계를 실험하는 경험이 된다.

4.4. 실시간 비디오 편집과 영화 사전 시각화

1. Video-to-Video 편집

   1. 촬영물에 실시간으로 시각 효과(Visual Effects)를 추가한다.
   2. 사람을 지우거나 배경을 추가하는 등 촬영 뒤의 변형을 즉시 확인한다.
   3. 음성 명령이나 클릭만으로 편집하는 플랫폼을 만들 수 있으며, 이는 비디오 편집의 새로운 패러다임이다.

2. 현재의 한계와 가능성

   1. 모델 품질이 아직 충분하지 않아 지금 만들어진 편집 플랫폼은 완성도가 높지 않다.
   2. C-Dance 2로 촬영하거나 생성한 영상을 업로드한 뒤 시각 효과·인물 제거·배경 추가를 수행하는 사용 사례가 이미 등장했다.
   3. 이런 기능은 할리우드 영화의 사전 시각화(previsualization)에서 특히 흥미롭다. 장면을 촬영하기 전에 변화 결과를 빠르게 확인할 수 있기 때문이다.

5. 실시간 모델을 실제 서비스로 만드는 Reactor 플랫폼

Reactor는 서로 다른 모델을 하나의 API와 개발자 인프라로 묶어 실시간 월드 모델을 제품에 통합하게 한다.

5.1. Reactor가 제공하는 네 가지 모델

1. Helios — ByteDance

   1. 실시간 인터랙티브 비디오 모델이다.
   2. 개 이미지를 바탕으로 계속 생성하고, 실행 중 고양이 같은 새 요소를 삽입하는 유형 1에 해당한다.

2. Link bot — Alibaba

   1. 발표 자막에 ‘Link bot’으로 표기된 모델이다.
   2. Google Genie 3와 같은 월드 모델 유형으로 캐릭터와 세계를 제어한다.

3. Long Live 2 — NVIDIA

   1. 멀티샷 필름(multi-shot film) 모델이다.
   2. 장면을 미리 프롬프트하고 시간에 걸쳐 일관된 이야기를 생성한다.

4. Sound Streaming — NVIDIA

   1. Video-to-Video 편집 모델이다.
   2. 촬영물이나 C-Dance 2로 만든 영상을 업로드하고 시각 효과를 추가하거나, 사람을 제거하고, 배경을 바꿀 수 있다.

5.2. 배치 추론과 실시간 추론의 인프라 차이

1. 배치 인프라의 단순한 요청-파일 구조

   1. 일반 비디오 생성은 요청을 보내고 클라우드에서 작업을 실행한 뒤 파일을 반환하는 구조다.
   2. 이 구조에서는 작업이 끝날 때까지 기다리면 되므로, 지속적인 세션 상태와 픽셀 스트리밍을 기본 요구사항으로 삼지 않는다.

2. 서버에서 클라이언트로 픽셀을 스트리밍하기

   1. 실시간 추론은 배치 추론에 쓰던 인프라를 그대로 적용할 수 없다.
   2. 서버에서 클라이언트로 픽셀을 계속 보내는 streaming 계층이 필요하다.
   3. 전송 중 입력을 받고 결과를 갱신해야 하므로 배치 생성이 고려하지 않는 복잡성이 추가된다.

3. 상시 실행되는 라이브 세션과 메모리

   1. 실시간 시스템은 요청 하나가 끝나면 종료되는 작업이 아니라 계속 실행되는 live session이다.
   2. 세션이 무엇을 보았고 어떤 명령을 받았는지 기억하는 메모리를 유지해야 한다.
   3. Genie 3 데모처럼 캐릭터가 뒤를 돌아본 뒤 앞에서 무슨 일이 있었는지 잊는 문제가 있으며, 왼쪽·오른쪽으로 돌렸던 행동과 맥락을 유지할 context window 개선이 필요하다.

4. 글로벌 저지연 배포

   1. 실시간 경험은 어느 지역에서든 100밀리초 미만(sub-100 ms)의 지연을 목표로 해야 한다.
   2. 인도 사용자는 인도에 있는 GPU로, 일본 사용자는 일본 또는 최대한 가까운 GPU로 라우팅해야 한다.
   3. 전 세계에 컴퓨팅 자원이 없으면 왕복 지연 때문에 서비스가 더 이상 실시간으로 느껴지지 않고 경험이 깨진다.

5.3. 개발자 통합과 비용 진입장벽

1. Reactor API는 모델을 API key로 불러오고 기존 비디오·이미지 플러그인이나 애플리케이션에 통합하는 흐름을 약 10줄의 코드로 단순화한다.
2. 발표 화면의 QR 코드로 시작할 수 있으며, 프로모션 코드 AIE2026은 75달러 상당의 크레디트를 제공한다.
3. Reactor는 모델 사용 비용을 매우 낮게 책정했기 때문에 75달러 크레디트도 상당한 컴퓨팅 사용량에 해당한다고 설명했다.
4. 박수가 나온 뒤 질문 시간이 이어졌다.

6. Q&A: 성능·산업 적용·결정론·평가

6.1. 16 FPS에서 30 FPS로 높이는 방법

1. 청중은 현재 16 FPS(Frames Per Second)를 일반적인 30 FPS로 높이려면 무엇이 필요한지 물었다.
2. Ahmed는 여러 GPU를 함께 쓰고, 모델 가중치를 최적화하며, 양자화(quantization) 기법을 적용하는 방법을 제시했다.
3. 해결책은 존재하지만 우선순위의 문제이며, 성능을 끌어올릴 수 있는 여러 경로가 있다고 답했다.

6.2. IBC와 방송 산업 사례

1. 청중은 International Broadcasting Convention인 IBC를 아는지 물었고, 자사 사례 연구를 산업 현장에서 발표할 계획이 있는지 질문했다.
2. Ahmed는 처음에는 IBC를 모른다고 답했지만, 이제 알아보겠다고 반응해 웃음이 나왔다.
3. 해당 질문에 대한 구체적인 사례 발표 계획은 그 자리에서 제시되지 않았다.

6.3. 결정론적 엔진과 규칙 집합

1. 청중은 시뮬레이션 공간에 적용할 결정론적 엔진(deterministic engine)이나 규칙 집합(rule set)을 Reactor가 실험했는지, 그리고 그 결과에 대한 피드백을 받을 수 있는지 물었다.
2. Ahmed는 질문의 의미를 먼저 확인한 뒤, Reactor가 현재 결정론적 규칙 엔진을 제공하지 않는다고 답했다.
3. 실시간 모델 인프라 자체를 구축하는 일이 이미 매우 크기 때문에, 개발자 플랫폼 위에 커뮤니티가 그런 규칙 계층을 만들고 있다.
4. 개발자가 구현한 내용을 오픈소스화하면 Reactor가 향후 활용할 수도 있으며, 커뮤니티가 그 일을 대신해 주는 점이 오히려 더 좋다고 덧붙였다.

6.4. 실시간 월드 모델의 일관성 평가

1. 실시간 모델의 품질·일관성·충실도를 어떻게 평가하는지는 월드 모델 연구 공동체 전체가 아직 답하지 못한 질문이다.
2. 충실도(fidelity)는 픽셀 비교처럼 상대적으로 측정하기 쉽지만, 실시간성·시간적 일관성(consistency)을 함께 평가하는 방법은 미해결 문제다.
3. 현재는 DeepMind를 포함한 연구 커뮤니티도 눈으로 결과를 보고 사람의 판단(human judgment)으로 평가한다.
4. Reactor에도 이 문제를 연구하는 연구팀이 있으며, 자동화된 평가 방법을 개발 중이다.

주요 발언 모음

“비디오가 소프트웨어처럼 프로그래밍 가능해지면 어떻게 될까?”

“실시간은 매체가 무엇인지 바꾼다. 단순히 더 빠르게 만드는 일이 아니다.”

“즉각적인 피드백은 궁극적인 수준의 제어다.”

“GPS가 없었다면 Uber는 존재하지 않았을 것이다.”

“교육의 미래는 LLM 기반이나 교과서 기반에만 머물지 않을 것이다.”

“실시간 모델의 평가는 오늘날 말 그대로 보고 판단하는 인간의 판단에 의존한다.”

핵심 데이터 & 수치

• 약 1,050초: 원문 재생 길이이며, 약 17분 30초 분량이다.
• 5·10·30초: 기존 배치형 비디오 생성이 흔히 멈추는 짧은 클립 길이의 예시다.
• 3가지 모델 유형: 무한 실시간 인터랙티브 비디오, 캐릭터·세계 제어형 월드 모델, 라이브 인터랙티브 아바타다.
• 4가지 Reactor 모델: Helios, Link bot, Long Live 2, Sound Streaming이다.
• 16 FPS → 30 FPS: Q&A에서 다뤄진 프레임 속도 개선 질문이다.
• 100밀리초 미만: 글로벌 실시간 경험이 목표로 삼아야 할 지연 시간이다.
• 약 10줄: Reactor API를 애플리케이션에 통합하는 코드 규모로 제시된 수치다.
• 75달러 크레디트: AIE2026 프로모션 코드로 제공되는 컴퓨팅 크레디트다.
• 1950년대 또는 그 이전: 정적 지도 시대를 설명하기 위해 제시된 시점이다.
• X·YouTube·Twitch: 시청자 투표형 인터랙티브 라이브 스트림이 배포될 수 있는 플랫폼 예시다.

결론 및 시사점

1. 실시간 인터랙티브 비디오는 생성형 비디오의 품질 경쟁을 넘어, 픽셀을 입력·조건·상태에 반응하는 실행 계층으로 바꾼다.
2. 제품팀은 프롬프트를 잘 만드는 기능만 설계할 것이 아니라 스트리밍, 세션 메모리, 즉시 피드백, 사용자 제어를 제품의 기본 상호작용으로 설계해야 한다.
3. 게임·영화·라이브 스트리밍은 시청자에게 다음 장면을 선택하게 하고, 광고는 사용자 맥락에 따라 화면 앞에서 생성되며, 편집은 음성·클릭 명령으로 즉시 반복되는 방향으로 이동한다.
4. 로봇공학과 의료는 통제 가능한 가상 환경에서 무한한 훈련 데이터를 만들 수 있고, 교육은 교과서를 읽는 방식에서 역사·과학적 상황에 직접 들어가는 방식으로 확장될 수 있다.
5. 실시간 제품의 병목은 모델 하나의 생성 품질만이 아니라 100밀리초 미만 지연, 글로벌 GPU 라우팅, 픽셀 스트리밍, 지속 메모리, 시간적 일관성 평가다.
6. Reactor의 API 추상화는 여러 모델을 한 개발자 플랫폼에 연결하지만, 결정론적 규칙과 평가 체계는 아직 커뮤니티·연구팀이 함께 풀어야 할 과제다.
7. 지도와 GPS, 필름과 디지털 카메라의 사례가 보여주듯 실시간화는 기존 매체의 속도 향상이 아니라 새로운 서비스 범주를 만드는 변곡점이며, 비디오도 같은 변화를 맞이하고 있다.

핵심 요약 (20줄)

1. Ahmed Ahres는 월드 모델을 Gaussian Splatting이나 단순한 비디오 생성이 아니라 진정한 실시간 인터랙티브 비디오로 정의한다.
2. 현재 Veo 3와 C-Dance 2 같은 생성형 비디오는 프롬프트를 보내 파일을 받고 시청하는 슬롯머신 구조에 가깝다.
3. 비디오가 소프트웨어처럼 프로그래밍 가능해지면 픽셀을 실시간으로 생성하고 장면을 실행 중에 바꿀 수 있다.
4. 실시간성은 단순히 처리 속도를 높이는 기능이 아니라 피드백과 통제권을 매체 안에 넣는 변화다.
5. 정적 지도에서 GPS로의 전환은 Uber처럼 이전에 존재할 수 없던 서비스를 만들었다.
6. 필름에서 디지털 카메라로의 전환은 촬영 중 화면을 보며 수정하게 해 Instagram과 TikTok의 고품질 콘텐츠 생산을 뒷받침했다.
7. 실시간 인터랙티브 비디오 모델은 5초나 30초 뒤 멈추지 않고 계속 이어지며 입력에 따라 장면을 바꾼다.
8. 개가 등장한 장면에 실행 중 고양이를 추가하고 개·고양이·용이 이어지는 이야기를 같은 스트림에서 만들 수 있다.
9. 즉각적인 피드백은 영화 제작자와 콘텐츠 제작자가 원하던 궁극적인 제어권을 제공한다.
10. 광고는 사용자의 최근 검색 맥락과 브랜드 요구를 반영해 사전 제작 없이 화면 앞에서 생성될 수 있다.
11. Genie 3 같은 월드 모델은 이미지와 텍스트로 캐릭터와 세계를 조종해 게임을 넘어 Bandersnatch식 서사를 가능하게 한다.
12. 통제 가능한 시뮬레이션은 로봇공학에 원하는 만큼의 훈련 데이터를 제공한다.
13. 학생을 역사적 상황에 직접 넣는 월드 모델은 LLM과 교과서 중심 교육을 넘어서는 경험을 만들 수 있다.
14. 라이브 인터랙티브 아바타는 아직 어색하지만 비디오·월드 모델과 결합하면 고객 지원·훈련·영업·게임·스트리밍을 바꿀 수 있다.
15. Reactor 사용자들은 시청자가 다음 장면을 입력하고 투표하는 X·YouTube·Twitch용 라이브 스트림을 만들고 있다.
16. 의료·요리 시뮬레이션은 약물 변화와 재료 투입의 결과를 안전한 가상 세계에서 시험하게 한다.
17. Video-to-Video 모델은 실시간 시각 효과, 인물 제거, 배경 추가, 음성·클릭 기반 편집과 영화 사전 시각화를 가능하게 한다.
18. Reactor는 ByteDance의 Helios, Alibaba의 Link bot, NVIDIA의 Long Live 2와 Sound Streaming을 개발자 API로 묶는다.
19. 실시간 인프라는 픽셀 스트리밍, 상시 세션 메모리, 글로벌 GPU 라우팅, 100밀리초 미만 지연을 요구한다.
20. 실시간 모델의 일관성을 자동 평가하는 방법은 아직 미해결이며 현재는 사람의 눈과 판단에 크게 의존한다.