La prima volta che abbiamo parlato di questa possibilità è stato a settembre dell'anno scorso: il team di Runway ha presentato un'anteprima del suo nuovo strumento di testo-video basato sull'intelligenza artificiale, che ha portato a un modello iniziale di video-video chiamato Gen-1. Ora, Runway anticipa l'arrivo del prossimo salto generazionale, Gen-2. Questa versione promette diverse modalità di elaborazione e una grande facilità d'uso.
Prepari un prompt. Lo carichi nel modello. Il modello commette alcuni errori. Aggiusti il prompt. Ci riprovi. Tutto quello che hai fatto finora è cambiare e riordinare parole. Senza Photoshop né strumenti avanzati. Non importa se si tratta di Midjourney, DALL-E o Stable Diffusion: la generazione di immagini con l'intelligenza artificiale è sempre più semplice e precisa.
Tuttavia, quella è solo la punta dell'iceberg. La generazione di video tramite testo si avvicina a grande velocità, e di fatto possiamo già provare strumenti come ModelScope, disponibile sul portale HuggingFace. Ma uno dei grandi protagonisti in questo campo è Runway, e con l'annuncio di suo nuovo modello Gen-2, gli utenti avranno la possibilità di generare clip di tre secondi, con otto diverse modalità di elaborazione.
Runway Gen-2: dal testo al video, senza passaggi
Text to Video è la prima modalità e, come suggerisce il nome, richiede solo un prompt testuale. Poi c'è Text + Image to Video, che oltre al prompt utilizza anche un'immagine di riferimento. Image to Video elimina l'influenza del prompt per concentrare tutta l'attenzione sull'immagine, e Stylization permette di trasferire uno stile specifico a ogni fotogramma di un video esistente.
Storyboard è ideale per elaborare mockup (ad esempio, immaginare una serie di libri come edifici in una città), Mask applica modifiche a un oggetto specifico all'interno di un video, Render è come Image to Video ma utilizza animazioni 3D, e Custom parla di un addestramento più avanzato per il modello.
Se sei interessato a provare Gen-2, devi creare un account su Runway, seguire il loro profilo su Twitter e aspettare. Il coming soon può essere un po' frustrante, ma Runway ha preso molto tempo con i test di Gen-1, e non c'è motivo per cui cambi la sua strategia.
Sito ufficiale: Clicca qui
