Adobes Project Live Set schneidet den Clip während der Wiedergabe

Die Demo bei Adobe MAX Sneaks am 11. November zeigt eine schwarze Katze, die auf einem Boden sitzt. Vier Prompts liegen darüber: der Katze eine Kochmütze geben, die Katze durch einen Shiba Inu ersetzen, durch einen Alligator im Miami-Hemd, durch einen Welpen im Smoking. Der Playhead läuft weiter, während die Ersetzungen aufgelöst werden. Nichts wird in eine Datei gerendert und kommt zurück. Das Bild ändert sich, während man zusieht.
Adobe nennt das Project Live Set. Es ist eine Research-Preview, kein Produkt, und das Unternehmen hat weder die Modelle dahinter beschrieben noch einen Termin genannt. Gautham Mysore, der die Video- und Audioforschung bei Adobe leitet, beschreibt die Absicht so: Generierung und Bearbeitung in eine durchgehende Erfahrung bringen, damit ein Creator ein Ergebnis sieht, darauf reagiert und den nächsten Schritt lenkt. Er nannte es außerdem ein Skizzenwerkzeug für bewegte Bilder, was die genaueste Beschreibung ist, die bisher jemand geliefert hat.
Was sich in der Oberfläche ändert
Generative Video war zwei Jahre lang ein Stapelprozess. Man schreibt einen Prompt, wartet, bekommt einen Clip, sieht ihn an und stellt fest, dass die dritte Sekunde falsch ist. Dann generiert man entweder alles neu und hofft, dass die guten Teile überleben, oder man geht in ein Schnittprogramm und versucht, die schlechte Strecke mit einem Schnitt oder einer Maske zu verstecken.
Live Set dreht die Reihenfolge um. Man startet mit einem Clip, den es schon gibt, und bearbeitet ihn, während er läuft. Die Arbeitseinheit wechselt von der Generierung zur Position der Wiedergabe.

Das klingt nach einem Detail der Oberfläche. Es ändert, was man beurteilen kann. Ein generiertes Bild zu beurteilen heißt, es in Bewegung zu sehen, mit seinem eigenen Timing, und die meisten aktuellen Werkzeuge verlangen ein Urteil nach einem Standbild oder einer kurzen Schleife, bevor man sich zu einem vollen Render entscheidet. Wenn die Änderung auf der Timeline passiert, passiert das Urteil dort, wo der Fehler sichtbar ist.
Der ausgelieferte Teil: Generierung in Premiere
Die Schlagzeilen machte die Research-Preview. Die Creative-Cloud-Ankündigung vom 10. November ist der Teil, den man diesen Monat benutzen kann.
Adobe hat Generate Video über ein Werkzeug namens Generative Media in die Premiere-Timeline gesetzt. Der Editor wählt eine Lücke, das System liest den umgebenden Schnitt als Kontext und generiert dann B-Roll, um sie zu füllen. Was zurückkommt, landet in der Timeline und lässt sich direkt dort nachbearbeiten. Die Modellwahl ist nicht auf Firefly beschränkt: Das Panel bietet auch Partnermodelle von Google, Kling, Runway und Luma.
Dieser letzte Satz ist der leise strategische Schritt. Adobe hat jahrelang Firefly als Grund positioniert, in Creative Cloud zu bleiben. Die Timeline für Video-Modelle der Konkurrenz zu öffnen, heißt eine einfachere Wahrheit anzuerkennen: Ein Editor will die Einstellung, die in die Lücke passt, und fragt nicht, von welchem Anbieter das Modell kommt.
Generative Remove kam gleichzeitig in die Beta. Man maskiert ein unerwünschtes Objekt, verfolgt es über den Clip und klickt auf Entfernen. Adobes Beispiele sind ein Galgenmikrofon, ein Logo, eine Ablenkung im Hintergrund. Die Behauptung ist, dass die Füllung realistisch ist und der Rest des Bildes unangetastet bleibt. Das behauptet jedes Entfernungswerkzeug, und nur darauf kommt es an.
Die Audio-Updates folgen derselben Logik, Übergaben zu entfernen. Enhance Audio teilt eine Mischung in Dialog, Musik, Atmosphäre und Effekte, damit jedes einzeln ausbalanciert werden kann. Separate Sound Source säubert verrauschten Dialog und zerlegt ihn in Komponenten. Separate Crosstalk legt überlappende Sprecher auf unabhängige Spuren. Color Mode, früher schon behandelt, ist jetzt allgemein verfügbar.
Warum die Timeline der richtige Ort ist
Ein Prompt-Feld weiß nichts. Eine Timeline kennt die Einstellung davor, die danach, die Brennweite, das Grading, die Kamerabewegung und die Tatsache, dass der Schauspieler eine Tasse in der linken Hand hält.
Jeder ernsthafte generative Video-Workflow ist um diese Lücke herum gebaut. Man generiert in einem Chatfenster, lädt herunter, importiert und verbringt die nächste Stunde damit, das Ergebnis an Material anzupassen, von dem es nie erfahren hat. Der generierte Clip wird für sich beurteilt und scheitert dann beim Kontakt mit der Sequenz.
Die Generierung dorthin zu legen, wo der Kontext lebt, beseitigt eine ganze Fehlerklasse, der gesparte Arbeitsschritt ist ein Nebeneffekt. Es ist auch ein kleineres Versprechen als "die KI schneidet deinen Film". Das Werkzeug füllt eine Lücke, die man selbst definiert hat. Dass es diese Lücke geben soll, entscheidet man weiterhin selbst.
Was Live Set noch beweisen muss
Drei Dinge, und Adobe hat öffentlich auf keines geantwortet.
Das erste sind Kosten und Latenz bei echter Auflösung. Echtzeit-Ersetzung auf einer komprimierten Vorschau ist ein anderes Ingenieursproblem als Echtzeit-Ersetzung auf einem 4K-Master. Jede Demo dieser Art wirkt sofort, weil die Demo darauf gebaut ist, sofort zu wirken.
Das zweite ist zeitliche Konsistenz. Eine Katze in einer festen Einstellung durch einen Shiba Inu zu ersetzen, ist der leichte Fall. Der schwere Fall ist ein Motiv, das sich dreht, hinter einem anderen Objekt vorbeigeht und zurückkommt. Die Demo zeigt vier Ersetzungen gleichzeitig und führt damit Durchsatz vor, keine Dauerhaftigkeit.
Das dritte ist, was mit dem Rest des Bildes passiert. Generative Eingriffe neigen zum Auslaufen. Man bittet um einen Hut und das Licht am Ohr ändert sich, oder der Schatten unter der Katze verschiebt sich um zwei Grad. Adobes ausgeliefertes Entfernungswerkzeug verspricht, dass der unberührte Bereich unberührt bleibt, und dieses Versprechen ist prüfbar, der Sneak nicht.
Unter allem liegt außerdem eine Lizenzfrage. Premiere bietet jetzt Partnervideo-Modelle von vier Firmen mit vier verschiedenen Positionen zu Trainingsdaten und vier verschiedenen kommerziellen Bedingungen. Wer im Dropdown ein Modell auswählt, trifft eine rechtliche Entscheidung, und nichts in einem Dropdown-Menü teilt das mit.
Das Muster der November-Veröffentlichungen
Sehen Sie sich an, was in denselben zehn Tagen erschienen ist. Krea öffnete eine Beta von Bots, Agenten, die ganze kreative Projekte übernehmen und Hausregeln im Gedächtnis behalten. ElevenLabs hat Lip-Sync ins Dubbing eingebaut, sodass eine fremdsprachige Fassung eine Aufgabe ist statt zwei. Melius öffnete Ditto, das Personen und Objekte in einem fertigen Clip austauscht. Google fügte Flow fünf Werkzeuge hinzu, eines davon macht aus einer einzigen Handyaufnahme mehrere Kamerawinkel und behält die Performance.
Nichts davon ist ein neues Modell. Jedes davon verändert, wo die Arbeit stattfindet.
Das Modellrennen der letzten zwei Jahre hatte einen seltsamen Nebeneffekt: Die Fähigkeit kam schneller als die Orte, an die man sie legen konnte. Man konnte eine überzeugende Acht-Sekunden-Einstellung generieren und trotzdem einen Nachmittag brauchen, um sie in einen Schnitt zu bekommen. Die aktuelle Runde von Veröffentlichungen schließt diese Distanz, und am schnellsten schließen sie die Firmen, die die Oberfläche schon besitzen, an der die Entscheidung fällt.
Adobe besitzt die Timeline. Das ist eine starke und eine unbequeme Position, denn wer die Oberfläche besitzt, kann die Modelle von jedem mieten, auch von den Firmen, die Adobe gerade in das eigene Panel eingeladen hat.
Was man jetzt damit macht
Live Set ist nichts, worum man herum plant. Sneaks-Previews kommen seit langem zwei Jahre später in engerer Form an, und Adobe hat sich ausdrücklich nicht festgelegt.
Die Premiere-Funktionen sind echt. Wer beruflich Video schneidet, hat diesen Monat einen interessanten Test: Bringt B-Roll-Generierung im Schnitt weniger Ausschuss als außerhalb? Ob die B-Roll gut aussieht, hat sich vor einem Jahr von selbst geklärt. Meine Vermutung: Die Zahl der Takes, die man wegwirft, sinkt stärker, als die Qualität jedes Takes steigt, und das ganze Argument für Modelle in Timelines ruht auf dieser Lücke.
Verwandte Artikel
Der 99-Milliarden-Kreislauf um die eigenen Kunden
Nvidia finanziert die Käufer seiner Hardware. Solange das wächst, nennt man es Ökosystem. Wenn nicht, nennt man es Lieferantenfinanzierung – und fragt nach den Bedingungen.
74 Prozent Bruttomarge haben ein Verfallsdatum
Speicherpreise, Waferpreise, ein schwererer Produktmix: Alle drei Kräfte treffen auf dasselbe Jahr wie der Führungswechsel. Das macht aus einer gewöhnlichen Margenstory eine politische.
175.000 Unterschriften bringen ihn nicht zurück
Die Kampagne ist ein Loyalitätsbeweis und governance-technisch fast irrelevant. Genau in dieser Lücke liegt das Interessante: Je länger sie dauert, desto schwächer wird sie.
Die Exportregel kontrolliert den Kunden, nicht den Chip
Nicht der Chip ist jetzt der Kontrollpunkt, sondern die Beziehung zum Kunden. Die Regel verbietet nichts – sie verschiebt, wer künftig fragen muss.