Numa época arrasada pelas fake news, o conceito de deepfake veio para ficar. Em alguns casos, não fizeram nada além de celebrar certas figuras famosas, enquanto em outros tentaram desnudá-las. O que vem a seguir na lista? Por enquanto, criar vídeos musicais usando múltiplos cortes processados com sincronização labial. Isso é possível graças ao sistema Wav2Lip, que além de ser open source, já possui uma demo interativa online.
No início, não foram poucos os que se sentiram intimidados pelos detalhes técnicos associados a um deepfake, mas todos soubemos naquele instante que era uma bomba prestes a explodir. Proibições, censura, fóruns apagados, vídeos removidos… nada deteve os entusiastas. Os projetos se multiplicaram, e alguns apresentaram resultados muito interessantes. Por exemplo, os deepfakes saíram em socorro de “The Mummy Returns”, habilitando a otimização do seu CGI horrível, e outro usuário conseguiu apagar o famoso “maldito bigode” de Henry Cavill.
E hoje chegamos às portas do Wav2Lip, um projeto de Rudrabha Mukhopadhyay que serve de base para o estudo “A Lip Sync Expert Is All You Need for Speech to Lip Generation In the Wild”, publicado em 23 de agosto passado. Em termos descontraídos, o objetivo é adaptar uma peça de áudio a qualquer vídeo disponível com um processo avançado de sincronização labial, sem sacrificar a precisão.
Como se não bastasse, isso funciona com qualquer identidade, voz e idioma, incluindo vozes sintéticas e rostos gerados por computador. Os responsáveis pelo Wav2Lip compartilharam vários vídeos no YouTube, mas são os usuários que conseguem elevar essas ferramentas a outro nível. Dito isso, o usuário “ontyj” no YouTube admite que se deixou levar durante seus testes com o Wav2Lip e acabou criando esta maravilha:
Interessado? Se for o caso, temos boas notícias para você. O Wav2Lip conta com uma demo interativa. Tudo o que você precisa fazer é carregar um vídeo (máximo de 20 segundos) e uma amostra de áudio (mesmo limite de 20 segundos). Com um pouco de sorte, os resultados serão satisfatórios, mas se quiser sincronizar vídeos mais longos ou com maior resolução, você precisará baixar e usar o código por conta própria.
Site oficial: clique aqui
Demo interativa: clique aqui
