텍스트-투-비디오의 현재 경험은 한 줄 입력하고 10분 기다려 10초짜리 영상을 얻는 것이다. Reactor는 그 10분의 기다림을 없애려 한다.
5월 28일, 이 회사는 스텔스 모드에서 나와 Lightspeed가 주도하고 Katzenberg의 WndrCo가 참여한 5900만 달러 규모의 시리즈 A 라운드를 발표했다. 맞다, 드림웍스의 그 Katzenberg다.
일반 텍스트-투-비디오와의 차이점
차이는 '실시간'에 있다. 일반 텍스트-투-비디오는 배치 처리 방식이다. 주문하면 백그라운드에서 렌더링한 후 결과물을 준다. Reactor는 다른 길을 간다. 프레임을 생성하면서 바로 출력하고, 길이 제한이 없으며 계속 상호작용할 수 있다.
창업자 Alberto Taiuti는 "우리 플랫폼을 사용하면 첫 프레임까지의 지연이 사실상 제로"라고 말했다.
이를 뒷받침하는 것은 '월드 모델'이다. 정적 비디오만 뱉어내는 모델과 달리, 월드 모델은 인식하면서 실시간으로 반응한다. 왼쪽으로 움직이면 그 자리에서 왼쪽 장면을 만들어낸다.
익숙한가? 지난주 Google의 Genie도 비슷한 접근법을 취했다. 지도에서 한 지점을 클릭하면 그 자리에서 세계를 구축해 걸어 들어갈 수 있게 한다. 차이점은 Reactor는 자체 앱을 만들지 않고, 이 기능을 SDK와 API로 패키징해 몇 줄의 코드로 통합할 수 있게 하여 개발자에게 제공한다는 점이다.
창업자들은 누구인가
CEO Alberto Taiuti와 CTO Bryce Schmidtchen은 모두 Apple Vision Pro의 기술 책임자 출신이다. Taiuti는 더 주목할 만한 이력이 있다. Luma AI의 공동 창업자이자 전 CTO로, 그 회사의 3D 및 비디오 생성 도구는 업계에서 널리 사용된다. 즉, 실시간 생성 기반을 처음 구축하는 것이 아니다.
회사는 작년 8월에 설립되었으며, 샌프란시스코 사우스파크에 위치해 있다. 16명의 팀원은 Apple, Netflix, Meta, Google, Adobe, Replicate, Microsoft 등에서 온 이력이 화려한 인물들이다.
컴퓨팅 측면에서는 AWS를 선호하는 클라우드로 사용한다. 이미 이 플랫폼을 사용하고 있는 곳은 Overworld라는 AI 연구소와 10여 개의 모델 팀이다.
왜 투자자들이 지금 투자하는가
방향이 바뀌었기 때문이다. 지난 2년간은 '누가 더 선명하고, 더 길고, 더 사실적인 비디오를 생성하는가'라는 정적 콘텐츠 비교 경쟁이었다. Reactor는 다음 단계에 베팅한다. 비디오는 더 이상 보기 위한 것이 아니라, 그 안으로 들어가 상호작용할 수 있는 것이 된다.
게임, 로보틱스, 그리고 '피지컬 AI'라고 불리는 분야는 모두 실시간으로 반응하는 영상 엔진이 필요하다. 누가 먼저 '실시간'이라는 장벽을 넘느냐가 이러한 시나리오의 진입로를 장악하는 열쇠가 된다.
Schmidtchen은 회사를 '모델 세계와 실제 애플리케이션 사이의 다리'라고 규정한다. Katzenberg는 투자 후 평가에서 이 접근법의 참신함에 '실제로 충격을 받았다'고 말했다.
아직 갈 길이 있다
찬물을 끼얹을 점도 있다. Reactor는 가격 세부 사항을 공개하지 않았으며, 실제 성능은 현재로서는 회사 자체 주장을 들을 수밖에 없다.
실시간 월드 모델 방향은 매력적이지만, '실시간'과 '품질'은 일반적으로 상충 관계에 있다. 빠르면 거칠어지고, 정교하면 느려진다. Reactor는 둘 다 잡겠다고 하지만, 그 말은 실제 제품이 나와야 신뢰할 수 있다.
회사는 오늘 SDK와 API를 공개했다. 사용성은 개발자들이 곧 발로 투표할 것이다.
출처: Real-Time AI Video Startup Reactor, Founded by Ex-Apple Engineers, Raises $59 Million (Variety); CocoLoop; Reactor Emerges from Stealth with $59M to Build the Platform for Real-Time AI Worlds (PR Newswire)