In un'epoca devastata dalle fake news, il concetto di deepfake è arrivato per restare. In alcuni casi non hanno fatto altro che celebrare alcune figure famose, mentre in altri hanno tentato di spogliarle. Qual è il prossimo passo? Per il momento, creare video musicali usando più clip elaborate con sincronizzazione labiale. Questo è possibile grazie al sistema Wav2Lip, che oltre a essere open source, ha già una demo interattiva online.
In principio, non furono pochi a sentirsi intimoriti dai dettagli tecnici associati a un deepfake, ma tutti capimmo in quell'istante che era una bomba pronta a esplodere. Divieti, censura, forum cancellati, video rimossi... nulla fermò gli entusiasti. I progetti si moltiplicarono e alcuni presentarono risultati molto interessanti. Per esempio, i deepfake sono venuti in soccorso di «The Mummy Returns», abilitando l'ottimizzazione del suo orribile CGI, e un altro utente è riuscito a cancellare il famoso 'maledetto baffo' di Henry Cavill.
E oggi arriviamo alle porte di Wav2Lip, un progetto di Rudrabha Mukhopadhyay che serve come base per lo studio «A Lip Sync Expert Is All You Need for Speech to Lip Generation In the Wild», pubblicato il 23 agosto scorso. In termini semplici, l'obiettivo è adattare un brano audio a qualsiasi video disponibile con un processo avanzato di sincronizzazione labiale, senza sacrificare la precisione.
Come se non bastasse, funziona con qualsiasi identità, voce e lingua, incluse voci sintetiche e volti generati al computer. I responsabili di Wav2Lip hanno condiviso diversi video su YouTube, ma sono gli utenti che riescono a portare questi strumenti a un altro livello. Detto questo, l'utente 'ontyj' su YouTube ammette di essersi lasciato andare durante i suoi test con Wav2Lip, e ha finito per creare questa meraviglia:
Interessato? Se è così, abbiamo buone notizie per te. Wav2Lip ha una demo interattiva. Tutto ciò che devi fare è caricare un video (massimo 20 secondi) e un campione audio (stesso limite di 20 secondi). Con un po' di fortuna, i risultati saranno soddisfacenti, ma se desideri sincronizzare video più lunghi o con una risoluzione maggiore, dovrai scaricare e utilizzare il codice per conto tuo.
Sito ufficiale: Clicca qui
Demo interattiva: Clicca qui
