La prossima fase: generazione di video con intelligenza artificiale e testo
Generazione di video

È solo questione di tempo, lo sappiamo tutti. La generazione di video con intelligenza artificiale si trova in uno stato basilare, quasi primitivo… ma lo stesso si diceva sulla generazione di immagini un anno fa, e oggi non possiamo fare a meno dei suoi algoritmi. Recentemente, la società Runway ha condiviso un teaser tramite YouTube e Twitter, anticipando il potenziale del suo strumento Text to Video. La demo si vede molto bene… ma cosa possiamo aspettarci nella vita reale?

La generazione di immagini con intelligenza artificiale può dare luogo a enormi differenze a seconda dell'algoritmo utilizzato, ma in generale tutti funzionano allo stesso modo: prima descriviamo cosa vogliamo (un ritratto, un paesaggio, ecc.), e poi aggiungiamo elementi secondari che servono come influenza o fonte di ispirazione, come il nome di un artista, un genere specifico, uno stile di pittura, e persino il nome di una fotocamera.

Ora, immaginiamo questo nel momento di creare video. Entriamo nell'editor e chiediamo una città con molto traffico. Poi richiediamo un taxi incastrato contro un semaforo, e infine la ragione dell'incidente: Un dinosauro gigante che passa di corsa. Naturalmente, un esperto di montaggio video può fare questo oggi con il budget adeguato, ma le persone di Runway suggeriscono che qualsiasi utente potrebbe ottenere risultati simili in futuro tramite il suo nuovo strumento, Text to Video:

Runway Text to Video: Creare video con intelligenza artificiale e testo

La strada di una città, un filtro cinematografico, un palo della luce che scompare come per magia. Un bellissimo giardino, più immagini, iniezione dinamica di testo. Un personaggio «verde», uno sfondo sfocato in tempo reale, e un tocco di Robert Capa come condimento. Il teaser è breve ma promette molto, e ci aiuta anche a definire la visione di Runway. Invece di addestrare un algoritmo indipendente di libero accesso, l'azienda sembra puntare allo sviluppo di un editor più avanzato con la funzione integrata di testo a video.

Se vuoi far parte dell'early access, l'unica cosa che devi fare è visitare la pagina ufficiale e compilare un modulo. Tuttavia, tutto questo solleva una domanda: Come addestreranno un modello simile? Al momento non c'è nulla di simile a LAION-5B per il video, e il livello di elaborazione richiesto è immenso. Staremo a vedere…

Fonti: Runway, Ars Technica