Frameboy는 세계 모델을 15 FPS로 브라우저에 스트리밍한다. 프레임 레이트가 논점이다.

World Labs는 11월 5일 사진 한 장으로 생성한 세계를 걸어 다닐 수 있는 연구 프리뷰를 공개했습니다. 브라우저 탭 안에서 돌아갑니다. 프레임은 클라우드 GPU에서 렌더링되어, 카메라를 조작하는 동안 초당 최대 15장으로 스트리밍됩니다.
데모 이름은 Frameboy이고, 휴대용 콘솔 모양을 하고 있습니다. 카트리지를 고르고 몇 초 기다리면, 클릭하기 전에는 없던 방 안에 서 있게 됩니다. 십자키가 나를 움직이고, 스틱이 고개를 돌립니다. 조금 끊깁니다. 15 FPS는 15 FPS이니까요.
World Labs도 알고 있습니다. 회사 자신의 설명은 이것이 프리뷰이고, 클라우드 하드웨어에서 돌아가야 하며, 로컬 렌더링보다 비용이 더 든다는 것입니다. 회사가 보라고 하는 것은 다른 것입니다.
주장은 충실도가 아니라 반복 비용에 관한 것이다
Atlas가 한 컷을 돌려주는 데 수십 초나 몇 분이 걸린다면, 당신은 신중하게 계획합니다. 카메라 경로를 고르고, 결심하고, 기다리고, 결과를 보고, 한 가지만 조정하고 다시 기다립니다. 모든 시도에는 분 단위의 시간과 주의력이라는 값이 붙으므로, 시도 횟수는 줄고, 하는 시도는 보수적이 됩니다.
기다림을 거의 0으로 떨어뜨리면 경제가 뒤집힙니다. World Labs의 표현은 이렇습니다. 나쁜 아이디어의 비용이 거의 0이면, 나쁜 아이디어는 없다. 실수가 탐색이 됩니다.
이것은 워크플로에 관한 주장이고, 자기 습관에 비추어 쉽게 시험해 볼 수 있습니다. 느린 생성형 영상 도구를 써 본 사람은 프롬프트를 모으는 그 특유의 인지 상태를 압니다. 세 개를 쓰고, 어느 것에 쓸지 고민하고, 안전한 것을 고릅니다. 즉시 답하는 도구는 프롬프트 스무 개를 받고, 스무 번째는 신중했다면 절대 입력하지 않았을 것입니다.
초당 15장은 헤드셋에 필요한 수준에 못 미치고, 게임처럼 느껴지는 수준에도 못 미칩니다. 그래도 이 루프를 주문이 아니라 조종처럼 느끼게 하기에는 충분합니다. 이번 릴리스에서 가장 많은 일을 하는 것은 그 구분입니다.
Atlas는 실제로 무엇인가
Atlas는 9월 초에 나왔습니다. 이전 세계 모델과 구분되는 설계 선택은 무엇을 컨텍스트로 쓰는가입니다. 대부분의 생성형 영상 시스템은 텍스트 프롬프트와 시간축을 조건으로 합니다. Atlas는 공간 컨텍스트, 즉 텍스트와 이미지, 영상, 3D 입력을 흡수할 수 있는 공유 표현을 조건으로 하고, 그 안의 카메라 포즈에서 다음 프레임을 생성합니다.
전신인 RTFM은 이미 존재하는 시점 사이를 보간할 수 있었습니다. Atlas는 장면을 처음부터 생성하며, 이미지 한 장이나 캡션만으로도 됩니다. 새로운 시점 합성 능력도 남겨 두어서, 실제 장소의 사진 몇 장을 주면 그 사이와 바깥으로 이동할 수 있습니다.
Frameboy는 추론 속도에 강하게 맞춘 Atlas 변형을 제공합니다. 그 튜닝이 새로운 시점 품질에서는 아무것도 맞바꾸지 않았다고 회사는 말합니다. 외부 테스트만이 결론을 내릴 수 있는 종류의 주장입니다.
데모에는 두 가지 구성 경로가 열려 있습니다. 첫째는 이미지 한 장을 주면 Atlas가 바깥으로 확장하며 나머지 장면을 채울 시점을 만들어 냅니다. 둘째는 실제 랜드마크 사진 몇 장을 주면 걸어 다닐 수 있을 만큼 공간을 재구성합니다. 첫째가 더 인상적입니다. 둘째가 더 유용합니다. 실제로 갈 수 있는 장소를 사전 답사하는 일은 이미 돈을 받고 하는 작업이기 때문입니다.
출시되는 쪽은 Viewfinder다
데모의 세계는 선별되어 있습니다. 자기 사진을 업로드해 걸을 수 있는 공간을 생성하는 것은 아직 안 됩니다. 적어도 공개된 경로로는요.
그 능력은 Viewfinder에 있습니다. World Labs가 프레임을 하나씩 쌓아 장면을 만드는 웹 앱이고, 현재 클로즈드 베타입니다. 생성된 각 프레임은 색과 깊이를 담습니다. 장면이 조립되면 Frameboy 오버레이가 그 실시간 탐색을 스트리밍합니다. 파이프라인은 이렇습니다. 오프라인에서 구성하고, 실시간으로 탐색한다.
깊이가 있는 프레임이 단서입니다. 평면 이미지를 출력하는 시스템은 영상 생성기입니다. 프레임마다 색과 깊이를 출력하는 시스템은 다른 소프트웨어가 소비할 수 있는 렌더러입니다. 회사 자신의 설명이 "영상 모델"이 아니라 "차세대 생성형 렌더러"에 도착하는 이유입니다.
그 아래의 하드웨어 문제
Frameboy는 AMD가 World Labs를 약 82억 달러 규모의 전액 주식 교환으로 인수하겠다고 발표한 지 6주 뒤에 나왔습니다. 거래는 규제 승인을 조건으로 2026년 말 이전에 마무리될 예정입니다. World Labs의 공동 창업자인 리페이페이는 AMD의 부사장 겸 최고 과학자가 되어 Lisa Su에게 보고할 예정입니다.
협업은 거래보다 앞서 시작됐습니다. 두 회사는 지난 1년간 World Labs의 모델을 AMD GPU에서 학습하고 추론하도록 최적화했습니다. 그래서 Frameboy는 실시간 세계 모델이 단일 벤더의 가속기에서, 대화형 제품이 가능한 속도로 제공될 수 있음을 보여주는 실연이기도 합니다.
그 배경이 발표문의 솔직한 한계를 설명합니다. 소비자가 이것을 로컬에서 돌리는 것은 선택지에 없습니다. 클라우드 GPU 시간은 로컬 렌더링보다 비싸고, 회사도 그렇게 직접 말합니다. 동시에 하드웨어와 알고리즘이 서로 적응해 전체가 저렴해질 것이라는 예측도 붙입니다. 가속기 파트너가 있는 회사라서 큰 소리로 말할 수 있는 것입니다.
아직 없는 것
목록은 짧고 구체적입니다.
초당 15장은 카메라를 빠르게 움직이면 무너집니다. 장면을 길게 훑으면 안정성을 잃습니다. 공개 접근은 선별된 세계로 제한되므로, 누군가 나쁜 각도에서 찍은 지저분한 휴대폰 사진을 올리면 어떻게 되는가라는 흥미로운 질문은 답이 없습니다. Viewfinder는 클로즈드 베타입니다. 가격도, SLA도, 세션이 얼마나 돌아야 품질이 흐트러지기 시작하는지에 대한 설명도 없습니다.
아무도 풀지 못한 더 미묘한 문제도 있습니다. 새로운 시점 합성은 특징적인 방식으로 실패합니다. 모델은 소파 뒤에 무엇이 있는지 모르므로 그럴듯한 것을 지어내고, 당신이 돌아 나오면 자기 자신과 모순됩니다. 한 바퀴 전체의 일관성이 데모와 도구를 가르는 시험이고, 데모 장면은 좋아 보이도록 골라져 있습니다.
그중 어느 것도 이번 릴리스를 깎아내리지 않습니다. Frameboy의 흥미로운 점은 사람이 일하는 방식에 대해 측정 가능하고 반박 가능한 주장을 한다는 것입니다. 피드백 루프를 충분히 줄이면 도구를 쓰는 방식이 그 속도와 함께 바뀐다. 이 주장은 검증할 수 있습니다. previz 팀에 같은 모델의 느린 버전과 빠른 버전을 주고 카메라 경로를 몇 개 시도하는지 세면 됩니다.
숫자가 오르면 세계 모델 사업에는 제품이 있는 것입니다. 오르지 않으면 15 FPS는 보도자료 안의 숫자이고, 진짜 시장은 지금 있는 자리에 머뭅니다. 오프라인 생성, 신중한 계획, 그리고 많은 기다림입니다.