Adobe 的 Project Live Set 讓片段邊播邊改

11 月 11 日 Adobe MAX Sneaks 的示範裡,一隻黑貓坐在地板上。畫面上疊了四條提示:給貓戴廚師帽,把貓換成柴犬,換成穿邁阿密印花襯衫的鱷魚,再換成穿燕尾服的小狗。替換逐個落地,播放頭一直在走。沒有算圖成檔案再讀回來。你盯著看,畫面就變了。
Adobe 把這套東西叫 Project Live Set。它是研究預覽,還談不上產品,公司沒說背後的模型,也沒給上線時間。Adobe 影片與音訊研究組負責人 Gautham Mysore 說,目的是把生成和編輯併成一段連續體驗,讓創作者看到結果、作出反應、再引導下一步。他稱它是動態影像的草圖工具,這是目前最準的說法。
介面上的變化
生成式影片當批次處理用了兩年。你寫提示、等、拿到片段、看,然後發現第三秒不對。接下來要嘛整段重生成,祈禱好的部分活下來,要嘛進剪輯軟體,用一刀或一個遮罩把壞的那段藏起來。
Live Set 把順序顛倒過來。你從一個已存在的片段開始,在它播放時改它。工作單位從「一次生成」變成「播放頭所在的位置」。

這聽起來像介面細節。它改變的是你能評估什麼。判斷一個生成的鏡頭,得看它在運動中的樣子,帶著它自己的節奏,現在多數工具卻要求你先看靜幀或一小段循環,再決定要不要整段算圖。修改發生在時間軸上,判斷就發生在錯誤看得見的地方。
真正上線的部分:Premiere 裡的生成
搶頭條的是研究預覽。11 月 10 日 Creative Cloud 那批發佈,才是這個月能用的。
Adobe 用一個叫 Generative Media 的工具,把 Generate Video 放進了 Premiere 時間軸。剪輯師選中一段空檔,系統讀取周圍剪輯作為上下文,再生成 b-roll 填進去。結果落在時間軸上,可就地調整。模型不限於 Firefly:面板裡還有 Google、Kling、Runway 和 Luma 的合作模型。
最後這句是安靜的戰略動作。Adobe 花幾年把 Firefly 說成留在 Creative Cloud 的理由。把時間軸向對手的模型打開,等於承認一件更簡單的事:剪輯師要的是能填上這個空檔的鏡頭,不在乎它來自哪家。
Generative Remove 同期進入 beta。圈出不要的物體,讓它在整段裡被追蹤,點刪除。Adobe 的例子是挑桿麥克風、logo、背景裡礙眼的東西。官方說法是補上的部分夠真實,畫面其餘地方原樣不動,每個擦除工具都這麼說,這也是唯一要緊的承諾。
音訊更新是同樣的思路:砍掉來回倒手。Enhance Audio 把混音拆成人聲、音樂、環境聲和音效,各自單獨平衡。Separate Sound Source 清理嘈雜人聲並拆成部件。Separate Crosstalk 把重疊的說話人分到獨立軌道。之前介紹過的 Color Mode 現已可用。
為什麼該放在時間軸上
提示框什麼都不知道。時間軸知道前一個鏡頭、後一個鏡頭、焦段、調色、運鏡,也知道演員左手端著杯子。
每個認真的生成式影片流程都在補這個缺口。在聊天視窗生成、下載、匯入,然後用一小時把結果對齊到一段從沒被告知過的素材上。生成的片段被單獨評判,一接觸序列就崩。
把生成放在上下文所在的地方,消掉的是一整類失敗,省一道工序是順帶。它給出的承諾也比「AI 幫你剪片」小。工具填的是你劃定的空檔,該不該存在仍由你決定。
Live Set 還要證明什麼
三件事,Adobe 一件都沒公開回應。
第一是真實解析度下的成本和延遲。在壓縮預覽上做即時替換,和在 4K 母版上,是兩個工程問題。這類示範看著即時,因為示範本就是照著「即時」做的。
第二是時間一致性。固定機位裡把貓換成柴犬是簡單情況。難的是主體轉身、從另一個物體後面穿過、再回來。示範一次給四個替換,證明的是吞吐,跟持續性無關。
第三是畫面其餘部分會怎樣。生成式修改容易滲漏。你要一頂帽子,耳朵上的光變了,或者貓底下的影子偏兩度。Adobe 已上線的擦除工具承諾沒碰的區域不會被碰,這條可以測,sneak 不行。
底下還壓著授權問題。Premiere 現在有四家公司的合作影片模型,四套訓練資料立場,四套商業條款。剪輯師從下拉選單選模型,是在做法律選擇,選單裡沒任何東西傳達這一點。
十一月這批發佈的共同點
看同十天上線的東西。Krea 開放 Bots beta,這些 agent 接手整個創意專案,把規矩記在記憶裡。ElevenLabs 把脣形同步折進配音,外語版本從兩件事變成一件事。Melius 開放 Ditto,能在成片裡換人換物。Google 給 Flow 加了五個工具,其中一個把一條手機素材變成幾個機位,表演不變。
這些都不是新模型。每一個改的是活發生在哪裡。
過去兩年的模型競賽帶出一個副作用:能力到的速度比安放能力的地方快。你能生成很像樣的八秒鏡頭,還要花一下午塞進剪輯裡。這一輪發佈在縮短這段距離,縮得最快的公司,是本來握著那塊決定介面的公司。
Adobe 握著時間軸。這是強勢位置,也不舒服,因為握著介面意味著模型可以向任何人租,包括 Adobe 剛請進自己面板的那幾家。
現在能拿它做什麼
Live Set 不是拿來排計劃的東西。Sneaks 的預覽兩年後落地時都更窄,Adobe 也明確不肯承諾。
Premiere 那幾個功能是真的。如果你靠剪片吃飯,這個月值得試的是在剪輯裡生成 b-roll,廢片會不會比在外面生成少。b-roll 好不好看,一年前就有答案了。我猜你扔掉的條數降得比每條品質升得多,而把模型放進時間軸的全部理由,就壓在這個差額上。