Utopai vuole che la produzione cinematografica AI ricordi l'intero film, non solo la singola inquadratura

Gli strumenti di video AI sono diventati bravi a produrre una singola clip impressionante. Chiedi una scena di trenta secondi e diversi modelli restituiranno qualcosa di convincente. Chiedi le quaranta inquadrature che compongono una sequenza coerente di cinque minuti, con lo stesso personaggio che indossa la stessa giacca nello stesso appartamento, e gli strumenti crollano. È in quel divario tra la clip e il film che risiede attualmente gran parte della frustrazione professionale verso il video generativo.

Utopai Studios ha lanciato la sua piattaforma di produzione PAI e il modello video Utopai X il 30 settembre, e il sistema è costruito specificamente attorno a quel divario. L'azienda statunitense è insolita in quanto sviluppa e produce anche i propri progetti cinematografici e televisivi, quindi gli strumenti vengono testati all'interno delle produzioni anziché essere progettati puramente come generatori per consumatori.

PAI sta per Production Assistive Intelligence

La piattaforma funge da spazio di lavoro che collega una sceneggiatura, personaggi, location, inquadrature, footage generato e decisioni creative precedenti. Un regista inizia fornendo a PAI una sceneggiatura, che il sistema scompone in elementi come personaggi, scene, location e oggetti di scena. Questi dettagli vengono organizzati in una struttura di produzione e poi rimangono disponibili mentre le inquadrature e gli asset visivi vengono sviluppati.

La parola importante è continuità. Se una produzione ha già stabilito che aspetto ha un personaggio, come è stata progettata una location o quale versione di un'inquadratura è stata approvata, quell'informazione rimane collegata al progetto. Non deve essere ridescritta ogni volta che viene generato un altro frammento di footage. È una funzionalità dall'aspetto banale e affronta uno dei problemi più persistenti del video generativo, ovvero che ogni generazione è una richiesta isolata senza memoria della precedente.

PAI include anche assistenti di produzione AI che possono utilizzare le informazioni esistenti del progetto per aiutare a pianificare le inquadrature e sviluppare alternative visive. L'azienda è esplicita sul fatto che i registi rimangono responsabili della direzione del lavoro, della revisione di ciò che viene prodotto e della decisione su quali versioni procedere. Questo è un punto pratico più che di marketing. Chiunque abbia provato ad assemblare una sequenza coerente da generazioni AI indipendenti sa che le decisioni umane su ciò che si incastra insieme costituiscono la maggior parte del lavoro.

Utopai X e il debutto nella classifica

Accanto a PAI, Utopai ha introdotto Utopai X, il suo modello text-to-video, integrato direttamente nel sistema di produzione. Il modello è entrato nella classifica text-to-video con audio di Artificial Analysis del 29 settembre al secondo posto a livello globale, con un punteggio Elo di 1.150. È stato anche il modello meglio classificato di un'azienda con sede negli Stati Uniti in quella particolare classifica.

Le posizioni in classifica cambiano rapidamente man mano che i modelli vengono aggiornati e arrivano nuovi concorrenti. Anche così, una collocazione indipendente conta perché significa che il modello non viene giudicato solo rispetto al demo reel dell'azienda. Artificial Analysis utilizza confronti ciechi in cui le persone scelgono tra video generati dallo stesso prompt senza sapere quale sistema li ha prodotti.

PAI non è limitato a Utopai X. Lo spazio di lavoro supporta la generazione di immagini, video e audio utilizzando i modelli disponibili, con i registi che scelgono quale modello usare e quando. Questa è una scelta di progettazione sensata. Una piattaforma di produzione che funziona solo con il proprio modello è un giardino recintato, e gli studi professionali non ricostruiranno le loro pipeline attorno al modello video di un singolo fornitore.

Da una sceneggiatura a una timeline di montaggio

La parte più interessante di PAI è che cerca di collegare la generazione con il lavoro meno glamour che trasforma le clip in una produzione finita. I take generati rimangono collegati alle inquadrature previste, così i registi possono confrontare le alternative e tornare a versioni precedenti invece di perdere il lavoro precedente. Le clip selezionate possono essere posizionate su una timeline di montaggio per vedere come si collocano accanto alle inquadrature circostanti.

Vale la pena essere concreti sul perché la coerenza sia così difficile. Un modello video generativo non porta una rappresentazione persistente di un personaggio come fa un motore di gioco. Re-deriva il personaggio dal prompt e dagli input di condizionamento a ogni generazione, quindi piccole variazioni si insinuano e si accumulano tra le inquadrature. Il compito di una piattaforma di produzione è mantenere stabili le parti fisse in modo che il modello debba solo inventare le parti che dovrebbero cambiare. Questo è un problema di gestione dei dati più che di modellazione, ed è per questo che uno spazio di lavoro che ricorda le decisioni può aiutare anche senza un modello video migliore sotto.

Le produzioni possono esportare materiale per la finalizzazione in software consolidati tra cui Adobe Premiere Pro e DaVinci Resolve. Questo conta più di quanto possa sembrare a prima vista. Uno strumento che insiste che l'intera produzione rimanga all'interno del proprio sistema chiede ai professionisti di abbandonare gli strumenti che hanno impiegato anni a padroneggiare. Incontrare i montatori dove già lavorano è un percorso di adozione molto meno attrito.

Ci sono anche funzionalità pensate per team di produzione più grandi. I flussi di lavoro enterprise possono mantenere commenti e approvazioni collegati a versioni specifiche. Un registro delle generazioni è pensato per aiutare gli studi a tracciare la provenienza del materiale e rivedere potenziali problemi di proprietà intellettuale. Quest'ultimo punto è sempre più necessario. Man mano che il footage generato dall'AI entra nelle produzioni commerciali, la questione di dove provenga l'output di un modello, e se possa essere concesso in licenza per la distribuzione, sta diventando una questione legale piuttosto che una curiosità tecnica.

Perché viene utilizzato su film reali

Utopai sta testando la tecnologia sui propri progetti, incluso un prossimo lungometraggio animato. L'azienda afferma che registi, artisti e animatori umani rimangono responsabili delle decisioni creative, con l'AI utilizzata come parte del processo di produzione. Essere sia produttore che fornitore di strumenti dà a Utopai un modo per trovare problemi che un'azienda puramente software non incontrerebbe fino a quando i clienti non li segnalassero.

PAI è disponibile anche al di fuori delle produzioni interne dell'azienda, con opzioni di abbonamento individuale e accesso enterprise per studi e team più grandi. Ciò significa che i registi possono iniziare a usare l'ambiente ora, il che trasforma il lancio in qualcosa di più di una dimostrazione tecnologica.

Il test che conta

La domanda più grande è se un sistema come PAI possa effettivamente risolvere il problema di coerenza che separa un video AI accattivante da un episodio completo. Generare secondi di footage convincente sta diventando routine. Ricordare personaggi, location, decisioni creative e revisioni attraverso un'intera produzione è una sfida molto più difficile, perché è un problema di gestione dei dati tanto quanto un problema di modello.

Questa riformulazione è il vero contributo del lancio. Per un po', la conversazione sul video AI è stata su quale modello produca la clip dall'aspetto migliore. Utopai scommette che la fase successiva riguardi meno la generazione di un momento spettacolare a sé stante e più il mantenere centinaia di decisioni creative collegate dalla prima pagina di una sceneggiatura al montaggio finale.

Se è così, i vincitori nella produzione cinematografica AI non saranno necessariamente i laboratori con il miglior modello video. Saranno coloro che risolveranno il problema noioso ed essenziale di far ricordare a una produzione ciò che ha deciso. Utopai non è l'unica azienda a lavorarci, ma è una delle poche a sostenere che il problema è il prodotto.