動画を設計書にして、1本6ドルでブラウザゲームを作るvideo-to-game

ゲーム31本。falの呼び出し1013回。202ドル。video-to-gameのREADMEの末尾にあるこの台帳が、リポジトリでいちばん説得力のある段落です。ゲームが良いからではなく、誰かが数えたからです。
プロジェクト自体はアプリではなくスキルです。Claude CodeかCodexかCursorに入れ、10〜15秒のゲームプレイのクリップを渡すと、遊べるブラウザのレベルが出てきます。Three.jsだけを使ったindex.htmlが1枚。エンジンもテンプレートも、他のライブラリもありません。デモ用の31本は、どれも動画モデルが先に生成したクリップから作り直されています。
「AIがゲームを作る」デモは今年いくつも出ました。これを見る価値があるのは、その下にある具体的な主張です。エージェントはゲームの見た目を設計できないのだから、頼むのをやめればいい。その部分は動画モデルに任せ、エージェントにはそれに合わせさせる。
動画が設計書になる
READMEに書かれた愚痴を読めば、やったことがある人には即座に分かります。
「少年が空を飛ぶクジラの間を滑空するゲーム」を頼むと、灰色の箱と既定の空と、プレイヤーと戦うカメラが出てくる。
本当にそうなります。シーンを作れと頼まれたコーディングエージェントは、プリミティブに手を伸ばします。箱、平面、半球ライト。コードで表現できるのがそれだからです。構図についての意見はありません。霧の濃さに趣味もありません。結果は技術的にはシーンで、感情としてはテストレベルです。
動画モデルは、他の欠点が何であれ、まさにその欠けている部分が得意です。見た目、カメラ、空気、記憶に残る一瞬。だからパイプラインは通常の順序を逆にします。まず動画、次にそれに合わせるコードです。
study_video.pyはクリップをフレーム、コンタクトシート、パレット、カットの時刻に分解します。エージェントは名前を付けたフレームから仕様を書きます。カメラ、主人公、メカニクスは1つ、決めの瞬間、見た目。「森のレベル」ではなく、たとえばこうです。カメラは低く主人公の2メートル後ろ、6メートル先に冷たい緑の霧、左から青緑の光源が1つ、メカニクスは滑空。
そのあとはすべて合わせる作業です。
素材はすべて動画自身のフレームから作る
コンセプトシートはNano Banana Pro。切り抜きはクリーンに。画像から3DへはMeshy、Tripo、Hunyuan 3D。リグとアニメーション。効果音と音楽。すべてfal_asset.py経由で記録されます。READMEのルールはぶっきらぼうです。手で描いたものは使わない、ダウンロードもしない。
この制約は見た目よりずっと働きます。参照からゲームを作る人間は、木のモデルをダウンロードして、合うことを祈ります。ダウンロードを許されたエージェントは、無料素材サイトの最初の結果を引っ張ってきて、アートディレクションがコラージュに崩れます。すべての素材を同じ生成器に通し、同じフレームを種にすれば、パレットは構造として揃います。
見た目は仕上げの工程ではなく仕様として扱われます。トーンマッピング、グレーディングは1つ、霧、ブルーム、ビネット、グレイン。すべて最初のシーンから導きます。変更のたびに、エージェントは同じ3箇所で動画とゲームを並べた比較画像を作ります。
この並べた画像が、方法論そのものです。これがなければ、エージェントは自分の想像力に対して最適化します。これがあれば、実際に見える参照に対して最適化します。

エージェントが自分のゲームを遊ぶ
ここは予想していなかった部分で、このプロジェクトをデモリールと分ける部分でもあります。
キーボードのシナリオがゲームを動かし、プレイヤーが画面を読むようにwindow.__gameを読みます。record_play.mjsがその結果をPlaywrightで実フレームレートで撮影します。best_window.pyが録画の中からいちばん生きている数秒を見つけます。落下、見えない壁、退屈な区間は、他の誰かが遊ぶ前に直されます。
自動プレイテストは新しくありません。エージェントが見たものを自分で直し、その根拠が自分で確認できる動画になっている自動プレイテストは、ループが確実に閉じています。コストの説明にもなります。エージェントは1回の反復で何十回もゲームを走らせます。
請求額
正確に書きます。この数字こそがリポジトリを読む理由だからです。
ゲーム31本。falの呼び出し1013回。内訳は画像594、3Dモデル194、効果音と音楽290。合計202ドル。1本あたり約6ドル。
6ドルという数字は頭に置いておきにくい。コーヒー1杯くらいで、契約アーティストの日当の1000分の1くらいです。しかも本当のコストではありません。コーディングエージェントのトークンは含まれていませんし、あなたの午後も入っていません。それでも有用なことを示しています。小さく遊べる3Dシーンの限界費用は、1本捨てられるほど安くなった。
落とし穴はREADMEにはっきり書かれています。素材ごとにfalへ払うこと、そして出力は完成品ではなく短いデモであること。6ドルのゲームは、感情の縦切りで、出荷するゲームではありません。
導入
まずClaude Code。いちばん対応が進んでいる経路です。
claude plugin marketplace add lovisdotio/video-to-game
claude plugin install video-to-game@video-to-game
あるいはスキルのフォルダを手でコピーします。cp -R skills/video-to-game ~/.claude/skills/。
Codex、Cursor、Gemini CLI、Copilotなどはこちらです。
npx skills add lovisdotio/video-to-game
スクリプトにはPython 3.9以上、ffmpeg、playwright-core入りのNode 18以上、そしてpip install fal-clientとFAL_KEYが要ります。
プロンプトは1段落です。
Turn gameplay.mp4 into a playable browser game with the video-to-game skill.
The prompt that made it is in gameplay.txt. Generate every asset with fal,
match the video's look, and show me side-by-side pairs and a recorded take
of you playing it.
クリップがない場合、リポジトリにはprompts/gameplay-video-prompts.mdが入っています。31本を作り直せるようにしたルールと、使ったプロンプトの全部です。このファイルは静かにリポジトリで最も価値のある部分です。クリップを良い設計書にする条件が書かれているからです。読めるシルエット、メカニクスは1つ、プレイヤーと戦わないカメラ。
結局これは何の話か
AIによるゲーム生成には、いずれモデルがゲームを直接作る、という筋書きがあります。かもしれない。それまでの間、このプロジェクトは今日機能する分業を書いています。見た目は動画モデル、構築はコーディングエージェント、素材は画像から3D、そしてループを閉じる自動プレイテスト。
面白い問いは、6ドルのゲームが良いかどうかではありません。たいてい良くない。問いは、同じ型を予算のあるものに向けたらどうなるかです。製品の発表ページ、美術館のキオスク、研修用のシミュレーション。パイプラインは、レベルが何のためのものかを気にしません。
エージェント用のツールを作る人には、もっと小さく鋭い教訓があります。このリポジトリが機能するのは、参照を検査可能にしたからです。動画は、モデルも人間も見て、比べて、議論できるものです。仕様を渡せばエージェントは仕様を満たします。クリップを渡せば、実在する何かに合わせざるを得ません。
それはプロンプトより良いインターフェースです。おそらく、多くのことにとって。