フレーム生成がベンダーをまたいだ。携帯機にも一票がある

11月11日、Apex ComputeはApex Neural Renderingのベータを公開した。フレーム生成、超解像、レイ再構成の3本をまとめたものだ。同社はNvidiaのDLSSの対抗に置いている。わかりやすい比較ではあるが、いちばん面白くない比較でもある。
論拠はスペック表にある。ベータ版ANRのフレーム生成は、Nvidia GTX 16とRTX 20以降、AMD Radeon RX 5000以降、Intel Arc AおよびBシリーズ、そしてSteam Deckで動くとされている。
このリストは2回読むといい。GTX 16シリーズには、NvidiaのハードでDLSSフレーム生成を成立させたテンソルコアがない。RX 5000はAMD自身の機械学習アップスケーラより前の世代だ。Steam Deckは低電力のAPUで、多くの開発者はこれを完全に別のターゲットとして扱っている。
これだけの幅を支えるには、専用の行列演算ユニットに頼れない。普通のシェーダで走らせるか、存在するテンソル経路で走らせるか、その混ぜ合わせしかない。1社のフラッグシップに載せるより難しい仕事で、しかもインストールベースの多数に届く唯一の版でもある。
携帯機がその証拠になる
フレーム生成はデスクトップで中途半端な評判を持っている。表示フレームレートは上がるが入力遅延は下がらない。高リフレッシュのモニタで素のフレームレートが高い環境では、たいてい割に合わない。この機能はプレイ中よりベンチマークでよく売れる。
携帯機は逆だ。720pで30フレーム、電力予算が1桁ワットの機械では、描画コストを上げずに見かけの滑らかさを引き上げる技術が、そのゲームをそのプラットフォームに出すか出さないかの差になる。素のフレームレートはもともと低く、遅延は画面と入力経路がすでに支配している。オンにしない場合の現実的な代替は、移植そのものをやめることだ。
クロスベンダー対応が「あれば嬉しい」でなくなるのは、この区分においてだ。ゲームのSteam Deck版は、テンソルコアがあると仮定できず、特定のアップスケーラも仮定できず、プレイヤーに別のハードを買えとも言えない。
3つの部品は同じ難しさではない
超解像がいちばん熟している部分だ。空間型も時間型もここ数年出荷され続けていて、実装間の画質差は、ブラインドテストでどれが動いているか当てられない水準まで縮んだ。
レイ再構成は画質にいちばん効く部分で、マーケティングではいちばん見えない部分でもある。レイトレースしたフレームのノイズ除去は、アーティファクトの本場だ。速い動きでの尾引き、細い形状でのゴースティング、植生のちらつき。よいデノイザは高いフレームレートより多くを買い、しかも遅延予算は一切変えない。
神経ネットワーク寄りのアプローチが最も効く部分でもある。古典的なデノイザはぼかしとノイズを交換するしかなく、その交換はどちらに転んでも見える。十分な数のノイズ入りフレームを見たモデルは、どの粒がディテールでどの粒がサンプリング誤差かをより上手く推測でき、その推測はシーン内の全フレームを一度に改善する。
フレーム生成は見出しを取る部分で、注釈がいちばん多い部分でもある。そしてゲーム側が正しく組み込むかに最も左右される。悪い実装は入力の遅れとして現れ、どれだけ滑らかでも埋め合わせがきかない。
3つを1つのパッケージとして出すのは妥当な判断だ。同時に、ゲームは1つだけ採って残りを無視できるということで、ほとんどのスタジオは実際そう使う。
誰も答えていないプラットフォームの問い
クロスベンダーのフレーム生成レイヤーは、ゲーム側が統合する必要がある。これはタイトル単位のコストで、タイトル単位のコストこそ、ベンダー固有機能が技術的に優れていても広がるのが遅い理由だ。
別の道はドライバ層かオーバーレイ層での実装で、開発者なしで動くが結果は悪い。この技術が必要とするモーションベクタと深度は、エンジンしか正確には出せないからだ。
ベータの発表はどちらの道か書いていない。エンジン統合が必要なら、普及は他のアップスケーラと同じ曲線を描く。数本のフラッグシップ、そこからミドルウェア経由でじわじわ広がる。オーバーレイで動くなら、どこにでも出て、平凡に見える。
すでに限界にあるカードでどうなるかという問題もある。フレーム生成は多少の演算を食い、GTX 1650で1080p低設定の現代タイトルを動かしている状況では、その演算が余っているとは限らない。この機能は余裕があるときだけ効く。すでにフレームを落としているカードで、苦しい素のフレームレートに補間フレームを足すと、見た目は滑らかで操作感は前より悪い絵が出てくる。
実際に見るべき3点
フレームレートの倍率ではない。見るのは3つだ。
入力遅延の代償がタイトルごとに測られ、公開されているか。見かけの滑らかさを倍にして30ミリ秒の遅れを足すフレーム生成は、手にコントローラがある状況では全部マイナスだ。
超解像の部分が低いところで戦えているか。速いカードで1440pが得意なのは簡単で、携帯機で720pが得意なのは難しい。そして後者がこのハードリストの狙いだ。低解像度ではアップスケーラに入る情報が減り、アーティファクトは1フレームに対して相対的に大きくなり、頼っている時間方向の履歴は、カメラが速く振れたときにまさに壊れる。
そして、半年後に人が遊んでいるゲームに載るのか。レンダリングの技術発表は、デモ、ベンチマーク、プレスリリースの順に現れて、そこで止まる長い歴史がある。
本当に効く枠組みはApex対DLSSの先にある。あるカードを買う理由だったものが、グラフィックメニューのチェックボックスになりつつある。チェックボックスになれば、シリコンが最高の会社がこの機能論争で勝つのをやめ、互換性が最も広い会社が勝ち始める。