프레임 생성이 벤더를 넘었다, 휴대기기도 한 표를 갖는다

11월 11일, Apex Compute가 Apex Neural Rendering 베타를 열었다. 프레임 생성, 초해상도, 광선 재구성을 묶은 세 갈래 제품이다. 회사는 이걸 Nvidia의 DLSS 맞은편에 세운다. 가장 손쉬운 비교이고, 가장 재미없는 비교이기도 하다.
논거는 사양표에 있다. 베타 ANR 프레임 생성은 Nvidia GTX 16과 RTX 20 이상, AMD Radeon RX 5000 이상, Intel Arc A와 B 시리즈, 그리고 Steam Deck에서 돌아간다고 적혀 있다.
이 목록은 두 번 읽어야 한다. GTX 16 시리즈에는 Nvidia 하드웨어에서 DLSS 프레임 생성을 가능하게 한 텐서 코어가 없다. RX 5000은 AMD 자체의 기계학습 업스케일러보다 앞선 세대다. Steam Deck은 저전력 APU이고, 많은 개발자가 아예 별도 타깃으로 취급한다.
이 폭을 감당하려면 전용 행렬 유닛에 기댈 수 없다. 평범한 셰이더에서 돌리거나, 존재하는 텐서 경로에서 돌리거나, 둘을 섞는 수밖에 없다. 한 회사 플래그십에 올리는 것보다 어려운 작업이고, 동시에 설치 기반의 다수에 닿는 유일한 버전이다.
휴대기가 그 증거다
프레임 생성은 데스크톱에서 어정쩡한 평판을 갖고 있다. 표시 프레임은 올리지만 입력 지연은 줄이지 않는다. 주사율 높은 모니터에 원래 프레임이 높은 환경에서는 보통 남는 장사가 아니다. 이 기능은 실제 플레이보다 벤치마크에서 더 잘 팔린다.
휴대기는 반대다. 720p에서 30프레임, 전력 예산이 한 자릿수 와트인 기기에서, 렌더 비용을 올리지 않고 체감 부드러움을 끌어올리는 기술은 그 게임이 이 플랫폼에 나오느냐 마느냐의 차이다. 기본 프레임은 이미 낮고, 지연은 이미 화면과 입력 경로가 지배한다. 켜지 않을 때의 현실적인 대안은 이식 자체를 포기하는 것이다.
크로스 벤더 지원이 있으면 좋은 정도가 아니게 되는 구간이 여기다. 게임의 Steam Deck 버전은 텐서 코어가 있다고 가정할 수 없고, 특정 업스케일러를 가정할 수도 없고, 플레이어에게 다른 하드웨어를 사라고 할 수도 없다.
세 부품의 난이도는 같지 않다
초해상도가 가장 성숙한 조각이다. 공간형과 시간형 업스케일러는 몇 년째 나오고 있고, 구현 간 화질 격차는 블라인드 테스트에서 어느 것이 돌아가는지 맞히기 어려운 수준까지 좁혀졌다.
광선 재구성은 화질에 가장 중요한 조각이고, 마케팅에서 가장 안 보이는 조각이다. 레이트레이싱 프레임의 노이즈 제거는 아티팩트의 본고장이다. 빠른 움직임의 번짐, 얇은 형상의 고스팅, 식생의 반짝임. 더 좋은 디노이저는 더 높은 프레임보다 많은 것을 사 주고, 지연 예산은 전혀 건드리지 않는다.
신경망 접근이 가장 잘 먹히는 조각이기도 하다. 고전적 디노이저는 흐림과 노이즈를 맞바꿀 수밖에 없고, 그 교환은 어느 쪽으로 기울어도 눈에 보인다. 노이즈 낀 프레임을 충분히 본 모델은 어느 반점이 디테일이고 어느 것이 샘플링 오차인지 더 잘 추정하고, 그 추정은 장면의 모든 프레임을 한 번에 개선한다.
프레임 생성은 헤드라인을 가져가는 조각이고, 단서가 가장 많은 조각이다. 게임이 제대로 붙이는지에 가장 크게 좌우되기도 한다. 나쁜 구현은 입력 지연으로 나타나고, 그건 어떤 부드러움으로도 메울 수 없다.
세 개를 한 묶음으로 내는 건 합리적인 포장 결정이다. 동시에 게임이 한 조각만 가져다 쓰고 나머지를 무시할 수 있다는 뜻이고, 대부분의 스튜디오는 실제로 그렇게 쓴다.
아무도 답하지 않은 플랫폼 질문
크로스 벤더 프레임 생성 레이어는 게임이 통합해야 한다. 이건 타이틀 단위 비용이고, 타이틀 단위 비용이야말로 벤더 전용 기능이 기술적으로 더 나아도 느리게 퍼지는 이유다.
다른 길은 드라이버 계층이나 오버레이 계층 구현이다. 개발자 없이 돌지만 결과가 더 나쁘다. 이 기술이 필요로 하는 모션 벡터와 깊이는 엔진만 정확히 줄 수 있기 때문이다.
베타 발표는 어느 쪽인지 말하지 않는다. 엔진 통합이 필요하면 보급은 다른 업스케일러와 같은 곡선을 그린다. 플래그십 몇 개, 그다음 미들웨어를 통해 천천히. 오버레이로 돌면 어디에나 나타나고 평범해 보인다.
이미 한계에 있는 카드에서 어떻게 되는지도 문제다. 프레임 생성은 연산을 좀 먹고, GTX 1650에서 1080p 저옵션으로 최신 게임을 돌리는 상황이라면 그 연산이 남아 있으리란 보장이 없다. 이 기능은 여유가 있을 때만 도움이 된다. 이미 프레임을 떨어뜨리는 카드에서 빠듯한 기본 프레임에 보간 프레임을 얹으면, 매끄러워 보이지만 조작감은 전보다 나빠진 화면이 나온다.
실제로 봐야 할 세 가지
프레임 배수가 아니다. 세 가지를 보라.
입력 지연 비용이 타이틀별로 측정되고 공개되는지. 체감 부드러움을 두 배로 만들면서 30밀리초 지연을 더하는 프레임 생성은, 손에 컨트롤러가 있는 상황에서는 전부 손해다.
초해상도 부품이 저사양에서 경쟁력이 있는지. 빠른 카드에서 1440p를 잘하는 건 쉽고, 휴대기에서 720p를 잘하는 건 어렵다. 그리고 이 하드웨어 목록이 노리는 쪽이 후자다. 저해상도에서는 업스케일러가 다룰 정보가 줄고, 아티팩트는 한 프레임 대비 커지고, 의지하는 시간적 이력은 카메라가 빠르게 돌 때 정확히 깨진다.
그리고 이게 반년 뒤 사람들이 실제로 하는 게임에 들어가는지. 렌더링 기술 발표는 데모, 벤치마크, 보도자료 순으로 등장하고 거기서 멈추는 오랜 역사가 있다.
중요한 틀은 Apex 대 DLSS 너머에 있다. 어떤 카드를 사는 이유였던 것이 그래픽 메뉴의 체크박스가 되고 있다. 체크박스가 되면 실리콘이 가장 좋은 회사가 이 기능 논쟁에서 이기는 걸 그만두고, 호환성이 가장 넓은 회사가 이기기 시작한다.